Технические термины: завершённая серия 09.11.2026
72 записи × 8 моделей × 2 режима = 1152 завершённых результатов, 576 пар.
| Модель | WER %, без → с | CER %, без → с | Медиана модели, мс, без → с | Найденные термины |
|---|---|---|---|---|
| Whisper Russian | 31.59 → 24.71 | 16.30 → 14.71 | 486.2 → 476.6 | 164 → 293 / 392 |
| Whisper Turbo | 32.11 → 26.66 | 15.94 → 13.53 | 192.3 → 193.8 | 152 → 286 / 392 |
| GigaAM v3 RNNT | 28.38 → 28.04 | 15.94 → 15.53 | 71.1 → 76.8 | 137 → 143 / 392 |
| LinTO Whisper | 32.51 → 30.50 | 16.49 → 15.44 | 207.3 → 206.2 | 152 → 283 / 392 |
| GigaAM Large CTC | 37.16 → 35.26 | 21.90 → 20.00 | 31.9 → 35.3 | 110 → 122 / 392 |
| Nemotron Labs Unified | 38.82 → 37.96 | 18.43 → 17.66 | 66.1 → 68.5 | 108 → 118 / 392 |
| Nemotron 3.5 ASR 0.6B | 48.62 → 48.45 | 23.64 → 23.54 | 88.6 → 90.0 | 84 → 87 / 392 |
| Nemotron Transcribe Lite | 59.86 → 59.86 | 26.05 → 26.05 | 103.7 → 102.6 | 33 → 33 / 392 |
Методика и ограничения
- Whisper Turbo, Whisper Russian и LinTO: hotwords соответствующей темы; остальные модели: точные замены после распознавания.
- Три фиксированных профиля: карты, погода, авиация. Неоднозначные замены «гриб», «сид», «стар» исключены.
- Аудио и границы одинаковы. Сохранены SHA-256, исходный текст модели, итоговый текст, применённые замены и измерения. LinTO не сообщает внутренний хеш; для него подтверждён одинаковый переданный вход.
- У моделей со словарём исходные тексты во всех парах совпали. Время словаря отделено от времени модели.
- 11 неуспешных попыток подключения NATS до готовности аудио сохранены в failures.json. Они не создавали вызов модели. Повторялись только такие попытки; плохие расшифровки не перезапускались.
- 16 прогревочных запусков исключены из итоговых метрик.
- Синтезированная речь, три голоса, четыре условия шума. Словарь составлен по известному корпусу. Это не независимая оценка живой речи и не p95.
- Предыдущая техническая серия сохранена отдельно; обычная русская речь и 144 исходных аудиофайла не изменены.
Поставка
Все сборки и изменения runtime выполнены через GitLab. Для недоступного с H100 registry runner передал проверенные образы через существующий SSH-канал с сохранением исходного manifest digest. Настройки proxy, TLS, GPU и MIG не изменены.
Функциональные изменения: Chat Agent MR !71, main a776e939; ASR MR !12, main 1af010ff. Дополнения канала поставки: ASR !13/!14, rag-stack !5/!6. ASR-only pipeline 5869 завершён успешно.
Отчёт: MR !72, main f1f4e41f2e6b2c5583007446eb4889e171a7d073, pipeline 5871. Точные runtime digest и заключительная приёмка записаны в release-state.json.
Публичный отчёт: https://chat-agent.gis-master.ru/asr-statistics.html Compare: https://chat-agent.gis-master.ru/asr-compare.html