Tencent Hunyuan открыла исходный код Hy-SimulMT — синхронного перевода речи с задержкой ~3 секунды

Tencent Hunyuan выпустила и открыла исходный код Hy-SimulMT — модели синхронного перевода китайской речи в английскую и обратно с клонированием голоса говорящего. Задержка по метрике StreamLAAL на бенчмарке RealSI составляет около 3 секунд против 4–5 у профессиональных переводчиков. Модель на 30B-A3B (MoE) уже работает в приложении Hy Translate бесплатно, лицензия Apache 2.0.

• Задержка ~3 с по StreamLAAL на RealSI против 4–5 с у людей-переводчиков
• Модель 30B-A3B MoE, сборки FP8 и GGUF, лицензия Apache 2.0
• На коротких наборах: FLEURS 90,3, CoVoST2 75,5, RealSI-Sentence 84,7
• В комплекте SimulInfer на vLLM и SimulTrain для дообучения