Gemini 4 Argon заняла лишь пятое место в Android Bench по кодингу
Google обновила рейтинг Android Bench от 26 октября, добавив модели GPT-6 Sol, GPT-6.1 Sol, Claude Sonnet 5 и 5.5, а также собственный Gemini 4 Argon. Лидирует Claude Sonnet 5.5 с pass rate 40% и completion rate 80,9%, а Gemini 4 Argon оказалась пятой с 21,3% и 81,8% при средней стоимости $267,70.
- Claude Sonnet 5.5 — первое место: pass rate 40%, completion rate 80,9%
- GPT-6.1 Sol: pass rate 29,3% при стоимости $99,50 против $1 574,90 у Claude
- Gemini 4 Argon — пятая: pass rate 21,3%, completion rate 81,8%, $267,70
- В рейтинг добавили уровень reasoning и среднюю стоимость каждой модели
Читать дальше
ИИ