tehno24.ru
← ИИ
ИИ22 октября 2026, 18:00

Бенчмарк: открытая Muse Spark Open от Meta провалилась как кодинг-агент

Открытая модель Meta Muse Spark Open (816 млрд параметров, 42 млрд активных) набрала 0,091 и 0,0877 из 1 в агентном кодинг-тесте Forge 2.0 против 0,8523 у лучшей сборки. Попытка в Gauntlet 7.2 не получила вердикта из-за таймаута провайдера. Локальные Gemma 4, Granite 4.2, LFM2.5, Xing 4.0 и Nemotron 3.5 Bolt выступили не лучше.

Бенчмарк: открытая Muse Spark Open от Meta провалилась как кодинг-агент
#Meta#MuseSpark#Qwen#Gemma
Читать дальше
ИИ

Бенчмарк: Gemini 2.5 Flash провалил проверку на ложные посылки

ИИ

Бенчмарк: LLM ошибаются в хешах испанской системы VeriFactu

ИИ

Anthropic: малые ИИ-модели могут начать самокопироваться на IoT-устройствах

ИИ

Препринт нашёл «ось боли» в 25 открытых LLM, но Claude в тестах не участвовал