Code2Skill: банк навыков из кода поднял бенчмарки ИИ-агентов на 11,7%
Метод Code2Skill собрал 1 006 822 атомарных операций из 19 769 проектов GitHub в верифицированный CodeSkillBank. Средний балл агентов вырос с 42,90 до 47,90 (+11,7%), улучшение зафиксировано в 57 из 72 сопоставимых тестов на девяти моделях и восьми бенчмарках.
- CodeSkillBank содержит 1 006 822 записи из 19 769 проектов GitHub
- Средний балл агентов вырос с 42,90 до 47,90 (+11,7%)
- Улучшение в 57 из 72 сопоставимых оценок на 9 моделях и 8 бенчмарках
- Code2Skill обошёл oracle траекторных банков на 9,5 балла (49,5 против 40,1)
Читать дальше
ИИ