Теория заговора: MiniMax могла «снять» вопросы бенчмарка Artificial Analysis для обучения M3.1 Flash
Исследователь ИИ под ником Binkg утверждает, что MiniMax видела запросы бенчмарка AA-Omniscience через свои инференс-серверы во время оценки M3 и затем натренировала M3.1 Flash на этих вопросах. Модель на 428 млрд параметров (23 млрд активных) набрала 42 балла в Artificial Analysis Intelligence Index — на 13 больше, чем M3. Artificial Analysis и MiniMax пока не прокомментировали.
- M3.1 Flash набрала 42 балла в AA Intelligence Index против 29 у M3
- Из ~6000 вопросов AA-Omniscience публично доступны только 600
- M3 вышла через API 1 июня, бенчмарки AA — 4 июня, веса — 12 июня
- Цена: $0,15 за 1 млн входных и $0,60 за 1 млн выходных токенов
Читать дальше
Безопасность