Xiaomi открыла исходный код аудиомодели MiDashengLM-Spatial

Xiaomi выпустила MiDashengLM-Spatial — открытую модель на ~8 млрд параметров, которая распознаёт не только тип звука, но и его направление, расстояние и движение. Веса и код опубликованы под лицензией Apache 2.0, модель построена на MiDashengLM-7B с добавлением пространственного аудиокодера Spatial-Dasheng.

• Модель на ~8 млрд параметров, лицензия Apache 2.0 для исследований и коммерции
• Пространственные данные требуют бинаурального входа: моно работает без направления
• Xiaomi называет её первым открытым end-to-end решением для пространственного аудио
• Технологии Dasheng уже используются в 30+ приложениях умного дома и авто