Голосовой помощник для всех: Алиса стала лучше понимать пользователей с особенностями речи

Пользователям с особенностями речи теперь будет проще общаться с Алисой. Она стала лучше распознавать голосовые запросы людей с речевыми нарушениями, например, с заиканием или трудностями в речи после инсульта, ДЦП или травмы. Это стало возможным благодаря дообучению нейросети.
Голосовой помощник для всех: Алиса стала лучше понимать пользователей с особенностями речи 
Freepik

В процессе обучения нейросети показали сотни тысяч аудиозаписей. Их подготовили люди с особенностями речи, которых привлекли к открытому тестированию качества распознавания речи Алисой — в том числе с помощью партнерских организаций. Качество распознавания оценивали по метрике Word Error Rate (WER): она позволяет определить долю неправильно понятых слов.

В итоге разрыв между точностью распознавания обычной речи
и с искажениями сократился в среднем на 20%.

В проекте участвовали некоммерческие организации «Центр лечебной педагогики», «Живи сейчас», «Жизненный путь», «Весна», «Перспектива», «Лучшие друзья» и другие. Их подопечные и другие участники тестирования записали более 855 тысяч скороговорок и фрагментов обычной речи — это более 900 часов аудиоматериалов. Классифицировать примеры по типам нарушений помогли специалисты-дефектологи из МГПУ. В общей сложности в проекте участвовали более 300 человек.

РЕКЛАМА – ПРОДОЛЖЕНИЕ НИЖЕ

Это не первый проект Яндекса по адаптации виртуального ассистента для людей с особенностями здоровья. Недавно в Москве прошла презентация инклюзивных навыков умной нейросети, разработанных студентами. А мобильное приложение «Дом с Алисой» уже поддерживает работу с программой экранного доступа: она зачитывает вслух содержимое экрана, помогая людям с нарушениями зрения взаимодействовать с интерфейсом.

колонка с умным помощником
Freepik
РЕКЛАМА – ПРОДОЛЖЕНИЕ НИЖЕ

Инклюзия и цифровая доступность — одно из фокусных направлений социальных проектов компании. Для незрячих пользователей адаптировано 15 сервисов и продуктов, среди них Поиск, Браузер, Яндекс Музыка, Букмейт и другие. На Кинопоиске есть фильмы с тифлокомментариями и SDH-субтитрами, а в приложении Go — специальные возможности для людей с особенностями здоровья. Например, можно выбрать опцию «Общаюсь только текстом», «Не говорю, но слышу», «Перевозка собаки-проводника», «Буду на инвалидном кресле» или «Помогите найти машину».