Главная страница
Навигация по странице:

  • Ashmanov Google Google

  • Tinkoff Yandex

  • Расчетно графическая работа сводный анализ нейронных систем распознавания аудио материалов


    Скачать 1.69 Mb.
    НазваниеРасчетно графическая работа сводный анализ нейронных систем распознавания аудио материалов
    Дата04.06.2022
    Размер1.69 Mb.
    Формат файлаdocx
    Имя файлаMINISTERSTVO_NAUKI_I_VYSShEGO_OBRAZOVANIYa_ROSSIJSKOJ_FEDERATsII.docx
    ТипДокументы
    #569441
    страница6 из 7
    1   2   3   4   5   6   7

    Проверка количества пустых ответов сервисов


    Не менее важным показателем чем WER показатель пустых ответов от сервисов в результате проведения тестирования. В таблице 5 представлены данные по количеству пустых ответов сервисов.

    Таблица 5

    Количество пустых ответов сервисов.







    Ashmanov

    Google

    Google

    Sber

    Sber

    Silero

    Tinkoff

    Yandex










    default

    enhanced

    IVR
















    Чтение

    0%

    0%

    0%

    0%




    0%

    5%

    4%




    Умная колонка

    0%

    2%




    0%




    0%

    4%

    0%




    Энергосбыт

    1%

    12%

    13%

    6%




    0%

    2%

    1%




    Звонки (такси)

    0%

    0%

    0%

    1%

    0%

    0%

    7%

    0%




    Публичные выступления

    0%

    1%

    0%

    0%




    0%

    2%

    0%




    Финансы (оператор)

    0%

    0%

    0%

    2%

    0%

    0%

    6%

    0%




    Аэропорт

    0%

    8%

    10%

    4%




    0%

    4%

    0%




    Аудио книги

    0%

    22%

    6%

    2%




    0%

    1%

    0%

    Радио

    0%

    19%

    2%

    3%




    1%

    4%

    0%




    Умная колонка (далеко)

    0%

    12%




    0%




    0%

    1%

    0%




    Банк

    0%

    2%

    3%

    1%

    1%

    0%

    5%

    1%




    Звонки (e-commerce)

    0%

    0%

    0%

    7%

    1%

    0%

    7%

    0%




    Заседания суда

    0%

    0%

    0%

    1%




    0%

    4%

    0%




    Yellow pages

    1%

    13%

    9%

    14%




    0%

    2%

    2%




    Финансы (клиент)

    0%

    0%

    7%

    35%

    9%

    0%

    5%

    0%




    YouTube

    0%

    13%

    1%

    6%




    0%

    1%

    0%




    Звонки (пранки)

    1%

    33%

    12%

    17%




    5%

    1%

    1%




    МедицНСкие термины

    0%

    1%

    0%

    7%




    0%

    6%

    1%




    Диспетчерская

    3%

    26%

    28%

    25%




    0%

    2%

    4%




    Стихи, песни и рэп

    2%

    19%

    3%

    25%




    0%

    1%

    1%




    Справочная

    1%

    12%

    14%

    9%




    0%

    3%

    0%



    Чем ниже показатель, тем лучше справилась система. Наилучшей результат в данном тестирования показала система Silero (Silero new), так как процент пустых ответов в процессе тестирования по всем датасетам наиболее низок.
      1. 1   2   3   4   5   6   7


    написать администратору сайта