Качество и скорость
Доли относятся только к выбранным кейсам.
Меньше провалов и больше полных успехов — разные критерии.
Нажмите цветную ячейку, чтобы увидеть запрос, ответ, критерий и замечание. Если в ячейке несколько попыток, она открывает последнюю; все попытки доступны в списке ответов.
Как модели распознавали одинаковое аудио
Исходный отчёт ↗Сводка по выбранным записям
WER/CER — доля ошибок по словам/символам, меньше лучше. WER может превышать 100% при лишних словах. Здесь нет искусственного порога «прошёл/провал»: степень ошибки показана числом.
Озвучка: задержка, ресурсные ограничения и образцы
Исходный отчёт ↗Что вошло и как читать результат
Сохранены исходные оценки
Зелёный означает выполнение требований кейса, жёлтый — частичное, красный — провал. Это оценки исходных серий по правилам и, где указано, ручному разбору. Они не равны буквальному совпадению с эталоном. При спорной оценке откройте исходный ответ и критерий.
Настроенные промпты подбирались на известных кейсах. Улучшение на них не доказывает качество на произвольных новых репликах. 10 новых кейсов доступны отдельным фильтром в раздельной серии.
Разные серии не смешиваются
Старое требование двух результатов без метки отменено. Архив сохранён отдельно. В QVikhr показано участие внешних правил. В CPU-опытах и GPU-сериях разные условия. Обычная русская речь и речь с терминами доступны раздельно.
Технические прогоны и озвучка без оценки естественности не получают зелёную отметку качества. Варианты без запуска показаны как «—». Дубликат каталога «asr-length-noise (2)» и промежуточный HTML, уже вошедший в итоговый, не посчитаны второй раз.
Ограничения полноты
Исторические файлы GoLOS из локальный источник не сохранились; численные результаты по памяти не восстановлены. Материалы с макетами, планами установки и обзорами моделей не считаются выполненными тестами. Субъективные жалобы на ударения не превращены в измеренный рейтинг без прослушивания по единой методике.