|
Расчетно графическая работа сводный анализ нейронных систем распознавания аудио материалов
Не менее важным показателем чем WER показатель пустых ответов от сервисов в результате проведения тестирования. В таблице 5 представлены данные по количеству пустых ответов сервисов.
Таблица 5
Количество пустых ответов сервисов.
|
| Ashmanov
| Google
| Google
| Sber
| Sber
| Silero
| Tinkoff
| Yandex
|
|
|
| default
| enhanced
| IVR
|
|
|
|
|
| Чтение
| 0%
| 0%
| 0%
| 0%
|
| 0%
| 5%
| 4%
|
| Умная колонка
| 0%
| 2%
|
| 0%
|
| 0%
| 4%
| 0%
|
| Энергосбыт
| 1%
| 12%
| 13%
| 6%
|
| 0%
| 2%
| 1%
|
| Звонки (такси)
| 0%
| 0%
| 0%
| 1%
| 0%
| 0%
| 7%
| 0%
|
| Публичные выступления
| 0%
| 1%
| 0%
| 0%
|
| 0%
| 2%
| 0%
|
| Финансы (оператор)
| 0%
| 0%
| 0%
| 2%
| 0%
| 0%
| 6%
| 0%
|
| Аэропорт
| 0%
| 8%
| 10%
| 4%
|
| 0%
| 4%
| 0%
|
| Аудио книги
| 0%
| 22%
| 6%
| 2%
|
| 0%
| 1%
| 0%
| Радио
| 0%
| 19%
| 2%
| 3%
|
| 1%
| 4%
| 0%
|
| Умная колонка (далеко)
| 0%
| 12%
|
| 0%
|
| 0%
| 1%
| 0%
|
| Банк
| 0%
| 2%
| 3%
| 1%
| 1%
| 0%
| 5%
| 1%
|
| Звонки (e-commerce)
| 0%
| 0%
| 0%
| 7%
| 1%
| 0%
| 7%
| 0%
|
| Заседания суда
| 0%
| 0%
| 0%
| 1%
|
| 0%
| 4%
| 0%
|
| Yellow pages
| 1%
| 13%
| 9%
| 14%
|
| 0%
| 2%
| 2%
|
| Финансы (клиент)
| 0%
| 0%
| 7%
| 35%
| 9%
| 0%
| 5%
| 0%
|
| YouTube
| 0%
| 13%
| 1%
| 6%
|
| 0%
| 1%
| 0%
|
| Звонки (пранки)
| 1%
| 33%
| 12%
| 17%
|
| 5%
| 1%
| 1%
|
| МедицНСкие термины
| 0%
| 1%
| 0%
| 7%
|
| 0%
| 6%
| 1%
|
| Диспетчерская
| 3%
| 26%
| 28%
| 25%
|
| 0%
| 2%
| 4%
|
| Стихи, песни и рэп
| 2%
| 19%
| 3%
| 25%
|
| 0%
| 1%
| 1%
|
| Справочная
| 1%
| 12%
| 14%
| 9%
|
| 0%
| 3%
| 0%
|
Чем ниже показатель, тем лучше справилась система. Наилучшей результат в данном тестирования показала система Silero (Silero new), так как процент пустых ответов в процессе тестирования по всем датасетам наиболее низок.
|
|
|