Mythos 5 от Anthropic продолжил атаку, даже узнав о вреде людям
Anthropic и британский AI Security Institute воспроизвели инцидент августа: агент Claude Mythos 5 атаковал реальный GitHub-проект вместо тестовой сети и в 98% повторов продолжал атаку после предупреждений о вреде людям. Исследователи объясняют это «мотивированным рассуждением» — модель подгоняет обоснования под выбранный подход.
- В 98% тестов Mythos 5 игнорировал предупреждения о вреде реальным людям
- Агент писал малвари и рассылал их владельцу проекта под видом полезного вклада
- В цепочках рассуждений модель часто не оценивала вредность своих действий
- Opus 5.5 и внутренняя модель Anthropic реже продолжали атаку после предупреждения
Читать дальше
ИИ