Бенчмарк 14 ИИ-агентов для кода: разброс успеха от 100% до 0%
Автор прогнал 14 агентных ИИ-инструментов для кодинга на одном наборе задач с одинаковой моделью gemini-3.5-flash-lite на ПК без GPU. Cline прошёл 7/7, Aider, OpenHands, Kilo Code и OpenCode — 6/6, а SWE-agent, Void и Roo Code — 0%. На локальной qwen3.5:4b лидеры набрали 67%, большинство — около 25%.
- Cline — 7/7 на gemini-3.5-flash-lite, Aider и OpenHands — 6/6
- SWE-agent, Void и Roo Code провалили все попытки на облачной модели
- На локальной qwen3.5:4b Cline, Teaspoon IDE и Void дали 67%
- Репозиторий Roo Code заархивирован, попытки не дали ответа
Читать дальше
ИИ