MWS AI открыла RESON — проверку распознавания телефонной речи по смыслу ошибок

MWS AI выложила в открытый доступ RESON — набор данных и инструмент для оценки распознавания речи в телефонном канале. Обычная метрика качества распознавания — доля неверно распознанных слов, но она одинаково штрафует опечатку в союзе и потерянную цифру в номере счёта.

Команда ASR-платформы Audiogram собрала проверку, которая считает ошибки по смыслу: что именно потерялось — имя, сумма, дата. Телефонный канал выбран не случайно: узкая полоса, шум и перебивания дают качество заметно хуже студийной записи, а именно на таких записях работают колл-центры.