Вместе с ним компания представила набор русскоязычных аудиоданных для тестирования ASR-моделей в одинаковых условиях

MWS AI, входящая в МТС Web Services, опубликовала в открытом доступе RESON — инструмент для оценки моделей автоматического распознавания речи. Он позволяет сравнивать их по более чем 10 метрикам и формирует интерактивный отчет с результатами анализа.

Для проверки модели в RESON загружаются ее расшифровки и эталонные тексты. Система приводит данные к единому формату, рассчитывает выбранные показатели и помогает выявлять типичные ошибки. Среди доступных метрик — WER и CER, оценивающие ошибки на уровне слов и символов, а также MWA и разработанный MWS AI показатель WIS, учитывающий значимость отдельных слов для конкретного сценария.

RESON распространяется как открытая Python-библиотека. Его можно запускать через командную строку или API и использовать внутри собственной инфраструктуры, включая закрытые контуры.

Одновременно MWS AI представила набор данных MWS RESON ASR OSD для сопоставления моделей в одинаковых условиях. Он включает более 12 тыс. русскоязычных аудиозаписей общей продолжительностью около 38 часов. В выборке есть разговоры, телефонные номера, даты, суммы, названия компаний и сервисов, а также записи с шумом и фоновой речью.

На четырех наборах данных лучшей среди протестированных моделей стала GigaAM v3 от Сбера со средним WER 7,42%. У Vosk показатель составил 11,07%, у Nvidia Parakeet — 15,83%, у Nvidia Nemotron — 25,52%.

Сейчас на главной

Статьи

Кирилл КВАШЕНКО: «32 года опыта и новая эра компьютерной мебели»

О революции в креслостроении, интеллектуальной мебели, эковселенной Zone 51 и продуктах, которые изменят представление о компьютерном пространстве. На вопросы редакции IXBT.pro отвечает Кирилл Квашенко, основатель компании «Бизнес Фабрика» и бренда Zone 51

Новости

Премия «Лучшее для жизни. Дизайн без границ» (Best for Life Design) – 2026 открывает прием заявок на премию

Дизайн сегодня выходит далеко за пределы архитектуры и интерьера. Он присутствует во всех сферах жизни: в книгах и медиа, цифровых интерфейсах, рекламе и брендинге, городской инфраструктуре и культуре. Каждый человек взаимодействует с результатами дизайнерских решений – выбирает, запоминает, ориентируется и принимает решения.

Новости

«МедиаКульт – 2026». От экономики внимания до ИИ – важные тренды индустрии на одной площадке

Прием заявок на «МедиаКульт – 2026» – одно из ключевых индустриальных событий, объединяющее профессиональную премию и деловой форум для лидеров медиа, маркетинга, креативных индустрий и технологий. Мероприятие пройдет осенью в Москве и соберет более 500 участников – представителей бизнеса, агентств, медиа и государственных структур.

Новости

Продолжается прием заявок на участие в премии «Время инноваций – 2026»

В 2026 году российская экономика столкнулась с серьезным вызовом: несмотря на активное развитие технологий искусственного интеллекта и усиление требований к информационной безопасности, внедрение инноваций во все сферы жизни остается локальным и несистемным.