Тест: качество прогноза Timestral от Mistral зависит от длины контекста, а не от размера модели
Разработчик проверил открытую модель прогнозирования временных рядов Timestral от Mistral на погоде Парижа. С контекстом в 158 дней MAE составила 6,489 и уступила бейзлайну «повторить вчера» (5,636), а с контекстом в 1 096 дней MAE упала до 3,326. Модель на 20,8 МБ отстала от флагманской на 837 МБ всего на 0,03.
- С контекстом 158 дней MAE 6,489, покрытие 80%-интервала — 43%
- С контекстом 1 096 дней MAE 3,326, покрытие — 64%
- Бейзлайн «повторить вчера» дал MAE 5,636
- Модель на 20,8 МБ отстала от 837 МБ на 0,03
Читать дальше
ИИ