Yandex открыла исходный код модели AliceAI-Foundation-80B-A3B-Base
Yandex выложила на Hugging Face под лицензией Apache 2.0 базовую MoE-модель AliceAI-Foundation-80B-A3B-Base, обученную с нуля на ~18 трлн токенов. 80 млрд параметров, 3 млрд активных на токен, 512 экспертов, контекст 262 144 токена; модель обходит прежний флагман Alice AI LLM (235B) в фактах, математике, коде и длинном контексте.
- 80B параметров, 3B активных на токен, 512 экспертов, top-10 роутинг
- Контекст 262 144 токена, обучение на ~18 трлн токенов с нуля
- MATH-500: 91,1 против 81,9 у Qwen3.5 35B-A3B
- Лицензия Apache 2.0, запуск через transformers и vLLM на NVIDIA
Читать дальше
ИИ