Google разрабатывает приложение Project Relate для людей с нарушениями речи

Корпорация Google разрабатывает приложение Project Relate, направленное на помощь людям с нарушениями речи. Продукт будет распознавать речь таких людей и преобразовывать её в текст, а также синтезировать речь по напечатанному тексту.

Приложение может значительно упростить жизнь людей, которые по каким-либо причинам лишены возможности внятно разговаривать. Нарушения такого характера могут возникнуть, например, из-за пережитых инсультов, заболеваний центральной нервной системы или полученных тяжелых травм. В результате человеку становится сложно чётко произносить слова, из-за чего его могут перестать понимать другие люди и голосовые ассистенты. С помощью Project Relate, такие люди смогут гораздо легче и быстрее общаться с окружающими и умной техникой.

Несмотря на то, что на рынке уже существует немало продуктов для распознавания и синтеза речи, практически все из них не подходят для работы с проблемным произношением. Дело в том, что механизмы распознавания учатся интерпретировать речь на основе множества записанных аудио, а люди с нарушениями речи чаще всего не привлекаются к участию в развитии таких механизмов — поэтому инструментам в данном случае не на чем учиться.

Разработка Project Relate является частью проекта Project Euphonia от Google — он направлен на проведение исследований в области нарушений речи. Над продуктом работают сотрудники корпорации, которые сами столкнулись с подобными проблемами — например, это ученый Дмитрий Каневский, потерявший слух в детстве, и член маркетинговой команды Обри Ли, имеющая мышечную дистрофию.

Приложение Project Relate имеет три основные функции«Listen» (слушать), «Repeat» (повторять) и «Assistant» (ассистент). Функция «Listen» преобразовывает речь пользователя в текст, который затем можно скопировать для использования в переписке или дать прочитать собеседнику. При использовании «Repeat» приложение сначала слушает речь пользователя, а затем повторяет сказанное более четким голосом. «Assistant» расшифровывает сказанные команды для Google Assistant — с его помощью можно, например, воспроизвести музыку или узнать прогноз погоды.

Для тренировки механизма приложения Google продолжает собирать как можно больше образцов речи с нарушениями (по информации с TechCrunch, на данный момент база данных для продукта содержит более миллиона образцов).

Сейчас корпорация набирает первую команду реальных пользователей для тестирования продукта и дальнейшей тренировки его ИИ-механизмов в процессе регулярного использования. Попробовать принять участие в тестировании может любой желающий человек с нарушениями речи, владеющий английским языком и имеющий смартфон на Android (с OS не ниже 8). Добровольцам нужно будет записать в диктофон приложения 500 фраз, которые предложит система. Делать это можно в удобном для себя темпе, с перерывами на отдых. Для заявки на участие нужно заполнить форму.

Мы знаем, что сообщество людей с нарушениями речи очень обширно и разнообразно, и люди могут по-разному взаимодействовать с Project Relate. Мы не хотим опираться на догадки о том, что нужно нашей целевой аудитории. Лучший способ сделать [качественный продукт] — это создать его вместе с [потенциальными] пользователями. Участвуя в тестировании с группой первоначальных реальных пользователей, мы сможем лучше понять, как наше приложение будет помогать людям в повседневной жизни, насколько правильно оно будет расшифровывать речь и как его можно усовершенствовать перед выходом на более широкую аудиторию.

Джули Каттиу
продакт-менеджер Google Research