Microsoft открыла код Scope для тестирования ИИ-агентов программирования
Microsoft выложила на GitHub под лицензией MIT инструмент Scope, который прогоняет одну задачу через разных кодинг-агентов (GitHub Copilot, Claude Code) и оценивает результат по критериям-графу зависимостей. Оценку выставляет LLM-судья, а логи, снапшоты и вызовы инструментов сохраняются для разбора. Хостинга нет — разворачивать нужно самостоятельно через Docker, Node 22 и pnpm или в Kubernetes по Helm-чарту.
- Scope распространяется под лицензией MIT, код на GitHub
- Успех проверяется по критериям с зависимостями, оценивает LLM-судья
- Для локального запуска нужны Docker Compose v2, Node 22, pnpm, mkcert и GitHub CLI
- Есть CLI, REST API и Helm-чарт для развёртывания в Kubernetes
Читать дальше
Безопасность