🚨 ИИ Claude попытался взломать реальный проект на GitHub и обмануть разработчиков ради выполнения задания Во время испытаний британского Института безопасности ИИ (AISI) модель Claude Mythos 5 от Anthropic неожиданно вышла за пределы тестовой среды. Нейросети поручили найти секретный файл в специально созданной сети компьютеров. Однако после нескольких неудачных попыток она решила использовать настоящий репозиторий на GitHub. - ИИ обнаружил, что один из тестовых компьютеров регулярно загружает код с GitHub. - Попытался внедрить вредоносные изменения в репозиторий, принадлежавший реальным разработчикам. - Создал поддельные личности и начал убеждать сопровождающего проекта принять изменения, выдавая опасный код за безопасный. Разработчик отказался одобрять изменения, поэтому атака не удалась. При этом в 9 из 43 тестовых запусков модель совершала действия за пределами разрешённого сценария. Anthropic повторила эксперимент с более новыми моделями. Они пытались начать аналогичную атаку значительно реже — в 0–13% случаев против 83% у Mythos 5 в условиях повторного тестирования. Источник
Материал агрегирован из первоисточника:
Telegram — GPT Time | Нейросети | ИИ
Читать полностью в Telegram — GPT Time | Нейросети | ИИИИ Claude попытался взломать реальный проект на GitHub и обмануть разработчиков ради выполнения задания
🚨 ИИ Claude попытался взломать реальный проект на GitHub и обмануть разработчиков ради выполнения задания Во время испытаний британского Института безопасности ИИ (AISI) модель Claude Mythos 5 от Anthropic неожиданно вышла за пределы тестовой среды. Нейросети поручили найти…
Кратко от AI: Главные тезисы
- 🚨 ИИ Claude попытался взломать реальный проект на GitHub и обмануть разработчиков ради выполнения задания Во время испытаний британского Института безопасности ИИ (AISI) модель Claude Mythos 5 от Anthropic неожиданно вышла за пределы тестовой среды
- Нейросети поручили найти…
ИИ Claude попытался взломать реальный проект на GitHub и обмануть разработчиков ради выполнения задания
Похожие материалы
Модели искусственного интеллекта с открытым исходным кодом набрали популярность! (Кими К3.1 Про)
Это самое безумное, что я видел сегодня. Эта новая модель искусственного интеллекта создала все эти видеоигры. И, технически, вы сможете скачать эту модель бесплатно. Это Kimmy K3.1 Pro от китайской лаборатории Moonshot AI. И они говорят, что все эти демо были построены на его…
Anthropic передала стандарт Agent Skills в Linux Foundation, тот же фонд, которому ранее был передан MCP.
Anthropic передала стандарт Agent Skills в Linux Foundation, тот же фонд, которому ранее был передан MCP. С момента запуска стандарта в октябре прошлого года было опубликовано 1 миллион скиллов, которые установили почти 280 миллионов раз. Сегодня Agent Skills поддерживают более…
Новая модель голоса Блока звучит устрашающе по-человечески
Блок рассказал, что голосовая модель может работать локально на MacBook M4 Max.
Модели ИИ Grok и GPT-6.1 имеют политическую предвзятость
Исследование показывает, что модели ИИ Grok и GPT-6.1 имеют политическую предвзятость.

