Сбер выкатил в опенсорс GigaAM Multilingual и GigaChat Audio Статьи по архитектуре моделей уже приняли на Interspeech 2026. В релизах исправили две проблемы открытых Speech AI систем — слабую поддержку языков СНГ и деградацию качества на длинных аудио. GigaAM Multilingual — мультиязычный стек для распознавания русского, казахского, киргизского, узбекского и английского. Тут две части: аудио-энкодер и CTC ASR. Энкодер обучали на 2 млн часов речи на 70+ языках, и он быстро адаптируется к новым доменам. На башкирском и грузинском его дообучили с одного датасета Common Voice до ошибки WER ~4% (у Whisper Encoder при тех же вводных — 11%+). А модель распознавания CTC ASR в версии на 240M параметров обходит Whisper Large v3 и Omnilingual 1B, хотя весит кратно меньше. GigaChat Audio — это audio-native LLM на базе GigaAM Multilingual и GigaChat3.1-10B-A1.8B. Модель тянет до 2 часов контекста и умеет в temporal grounding — локализацию событий во времени с таймстемпами и суммаризацией интервалов. На длинных записях от 20 до 60 минут точность локализации IoU составляет 48.3, в то время как у Voxtral, Phi-4 и Qwen3-Omni результат близок к нулю. Вдобавок опубликовали датасет TimeGround-1M для обучения LLM привязке событий ко времени, а на RuBQ-Audio модель выбивает 60.0 (против 43.7 у Qwen3-Omni). Полноразмерную GigaChat-Max-Audio уже добавили в ИИ-помощник ГигаЧат giga.chat, а распознавание голосовых сообщений работает в @smartspeech_sber_bot. Веса открытых моделей, датасет и статьи на arXiv уже в сети. GigaAM Multilingual GigaChat Audio @ai_newz
Сбер выкатил в опенсорс GigaAM Multilingual и GigaChat Audio Статьи по…
Из этого канала
- #4651MIRA — world model с мультиплеером Французский стартап kyutai заколлабился с…
MIRA — world model с мультиплеером Французский стартап kyutai заколлабился с Epic Games и сделал нейронную версию игры Rocket League.
- #4649Нейродайджест за две недели (#122) LLM - LongCat 2.0 — Первая большая LLM на…
Нейродайджест за две недели (#122) LLM - LongCat 2.0 — Первая большая LLM на китайских чипах.
- #4648Anthropic продлили доступ к Fable 5 ещё на неделю Кроме этого продлили…
Anthropic продлили доступ к Fable 5 ещё на неделю Кроме этого продлили увеличение лимитов на 50% на ту же неделю. Вот что конкуренция животворящая делает.
- #4647Muse Image и Muse Video - Новые генераторы от Мета Это первый релиз после…
Muse Image и Muse Video - Новые генераторы от Мета Это первый релиз после ренейма Meta GenAI в Meta Superintelligence lab. И своего рода преемник моделей Emu.