Назад к статьям
Несколько месяцев назад мы добавили закрытые данные в Open ASR Leaderboard: 11 частей от Appen и DataOceanAI, охватывающих подготовленную и разговорную речь с пятью акцентами (блог). Реакция сообщества была отличной: многие подчеркивали важность отложенных наборов для заслуживающих доверия оценок. С тех пор мы добавили еще одну закрытую часть для английского языка с индийским акцентом совместно с Voice Arena (блог).
Мы рады объявить о новом сотрудничестве с Liva AI для добавления еще бо́льшего количества закрытых данных с двумя новыми акцентами: египетским 🇪🇬 и нигерийским 🇳🇬.
Это часть наших постоянных усилий по улучшению представленности в оценках систем распознавания речи (больше акцентов и больше языков) и повышению доверия (новые закрытые данные для минимизации подгонки под бенчмарки и новые поставщики данных). Мы рады видеть, как сообщество продолжает улучшать производительность ASR для всего мира 🤗
Более подробная разбивка по акцентам на вкладке «Private»
С появлением этих новых акцентов мы теперь можем представить более детальную разбивку по акцентам на основе трех кругов Качру (выражаем благодарность Hume AI за эту идею в их таблице лидеров). Теперь в Open ASR Leaderboard будет отображаться:
- США против стран вне США (Великобритания, Австралия, Канада, Индия, Нигерия, Египет)
- Внутренний круг (США, Великобритания, Австралия, Канада) против внешнего и расширяющегося кругов (Индия, Нигерия, Египет)
По мере добавления новых акцентов мы разделим внешний и расширяющийся круги.
О компании Liva AI
Liva AI собирает данные о мультимодальных взаимодействиях с помощью потребительских продуктов, используемых реальными людьми. Поскольку Liva владеет как средой сбора, так и дистрибуцией, она может проектировать продукты с учетом конкретных пробелов в моделях в различных доменах, отраслях, языках, модальностях и типах взаимодействия. Это дает ей доступ к естественному поведению с высоким контекстом, которое возникает в ходе реального использования продукта, а не в результате искусственно вызванных или ориентированных на задачи взаимодействий.
