Пользователям с проблемами речи теперь будет проще общаться с Алисой. Она стал лучше распознавать голосовые запросы людей с речевыми нарушениями — например, в случае заикания, ДЦП, последствий инсульта или травмы. Это стало возможным благодаря дополнительному обучению нейросети.
В процессе обучения Алисе были показаны сотни тысяч аудиозаписей. Их составили люди с нарушениями речи, которые привлекли Яндекс к открытому тестированию качества распознавания речи Алисой, в том числе с помощью партнерских организаций. В результате разрыв между точностью распознавания нормальной и искаженной речи сократился в среднем на 20%. Качество распознавания оценивалось с помощью метрики Word Error Rate (WER): она позволяет определить долю непонятых слов.
В проекте участвуют некоммерческие организации «Центр лечебной педагогики», «Живи сейчас», «Жизненный путь», «Весна», «Перспектива», «Лучшие друзья» и другие. Их ученики и другие испытуемые записали более 855 000 скороговорок и отрывков обычной речи – это более 900 часов аудиоматериала. Специализированные логопеды МПГУ помогли классифицировать примеры по видам нарушений. Всего в проекте приняли участие более 300 человек.
Это не первый проект Яндекса, адаптирующий виртуального помощника для людей с особыми потребностями. Недавно в Москве прошла презентация инклюзивных навыков Алисы, разработанных студентами. А мобильное приложение «Дом с Алисой» уже поддерживает работу с программой чтения с экрана: оно читает содержимое экрана вслух, позволяя людям с нарушениями зрения взаимодействовать с интерфейсом.
Инклюзивность и цифровая доступность — одно из направлений социальных проектов Яндекса. Для слепых пользователей адаптировано 15 сервисов и продуктов, в том числе «Поиск», «Браузер», «Яндекс Музыка», «Букмейт» и другие. На «Кинопоиске» есть фильмы с аудиокомментариями и субтитрами SDH, а в приложении Go есть специальные функции для людей с особыми потребностями. Например, вы можете выбрать вариант «Я общаюсь только посредством текстовых сообщений», «Я не говорю, но слышу», «Перевезти собаку-поводыря», «Я в инвалидной коляске» или «Помоги мне». найди служебную собаку». машина.»