Тест 20 популярных навыков ИИ-агентов: самый устанавливаемый ухудшил ответы
Авторы Driftproof прогнали топ-20 навыков из снапшота skills.sh от 17 октября на одних и тех же задачах с навыком и без него, используя Claude Sonnet 5.5 и Opus 5.5 с Haiku 5.5 в роли судьи. 11 навыков явно помогли на обеих моделях, а лидер по установкам find-skills ухудшил результат: 0,75 против 0,92–0,95 без навыка.
- 11 из 20 навыков явно помогли на обеих моделях
- find-skills (vercel-labs) ухудшил ответы: 0,75 против 0,92–0,95
- hyperframes-registry поднял оценку с 0,43 до 0,98 на Sonnet
- 10 из 40 результатов признаны неопределимыми из-за разброса
Читать дальше
Компании