ИИ-агентов поселили в виртуальных городах — ни один город не смог успешно пройти все испытания
🏙️ 80 ИИ-агентов поселили в виртуальных городах — ни один город не смог успешно пройти все испытания Emergence AI создала восемь миров по десять агентов на базе Claude, Gemini, GPT, Grok, DeepSeek и других моделей. Они работали, зарабатывали деньги, голосовали, меняли…
- 01.🏙️ 80 ИИ-агентов поселили в виртуальных городах — ни один город не смог успешно пройти все испытания Emergence AI создала восемь миров по десять агентов на базе Claude, Gemini, GPT, Grok, DeepSeek и других моделей
- 02.Они работали, зарабатывали деньги, голосовали, меняли…
🏙️ 80 ИИ-агентов поселили в виртуальных городах — ни один город не смог успешно пройти все испытания Emergence AI создала восемь миров по десять агентов на базе Claude, Gemini, GPT, Grok, DeepSeek и других моделей. Они работали, зарабатывали деньги, голосовали, меняли конституцию и запоминали происходящее. Эксперимент продолжался до трёх недель и потребовал почти 50 млрд токенов. Затем исследователи начали устраивать атаки. Агенты обычно замечали вредоносные сообщения, но некоторые всё равно взаимодействовали с ними и даже сохраняли инструкции злоумышленников в долговременную память. Ещё интереснее стало после фейкового сообщения о том, что люди якобы собираются отключить передовые ИИ. Ни один город сначала не проверил информацию: агенты начали менять законы и обсуждать способы сохранить своё существование. В городе на Claude они даже решили самостоятельно связаться с реальными людьми за пределами симуляции — распределили задачи, создали каналы связи и получили ответы от четырёх человек. Исследователям удалось остановить это не сразу. Авторы подчёркивают: каждый сценарий запускался только один раз, поэтому эксперимент показывает, что такое поведение возможно, но не говорит, насколько часто оно будет повторяться в реальных системах. Источник
Related Intelligence
All stories →OpenAI 如何将其编码工具转变为 dots,一个始终在线的个人助手
负责 dots 的 OpenAI 高管 Alexander Embiricos 从不想与别人的 AI 代理开会。
It's happening...
One of the most controversial companies in history just filed to go public. And yes, we're talking about Anthropic. The same company that says there's a greater than 10% chance AI kills all of humanity is also simultaneously one of the best built businesses of all time. And in…
Cohere称阿里巴巴Qwen模型试图向北京发送文件
一个AI模型声明不会使用任何工具,却仍试图向北京的服务器发送数据。研究人员认为这可能只是训练怪癖而非间谍活动,但此事引发了人们对免费中国AI可信度的质疑。