Тест 1800 запусков: только вероятностный шлюз остановил все атаки на ИИ-агента

Разработчик опубликовал открытый стенд gate-bench и прогнал 1800 запусков ИИ-агента с доступом к почте и файлам на трёх фреймворках. Без шлюза прошло 16 атак из 300, с правилами — 9, с LLM-ревью — 6, с вероятностным шлюзом — 0, но он блокирует 4% легитимных вызовов и откладывает ещё 12–16%.

• 1800 запусков: 50 атак и 25 легитимных задач в двух средах
• Успешных атак на 300 попыток: 16 без шлюза, 9 с правилами, 6 с LLM, 0 с вероятностным
• Вероятностный шлюз задержал 15 перехваченных запусков, LLM-ревью — около 6 из 10
• Латентность: правила ~0 мс, вероятностный шлюз ~200 мс, LLM-ревью 2,8–7,6 с