Сегодня расскажем про приложение, разработанное на основе технологии распознавания речи Yandex SpeechKit
Искусственный интеллект, который используют для настройки голосовых помощников и автоматизации кол-центров, теперь позволяет слабослышащим людям безбарьерно общаться с окружающими.
История, о которой мы хотим вам рассказать, началась около десяти лет назад, в 2015 году. Студенты Московского физико-технологического института (МФТИ) задумали сделать Приложение специальное для глухих людей.
Прежде они исследовали потребности слабослышащих и глухих людей и выявили , что не все из них знают русский жестовый язык (РЖЯ)
и могут свободно поддерживать коммуникацию.
Студенты, узнав все пожелания целевой аудитории , разработали прототип приложения на платформе Android.
Как на практике работает приложение.
Функционал сервиса разработчики разделили
на две основные части:
- Первая часть это распознавание речи и перевод ее в текст — для людей с депривацией слуха.
- Вторая часть , это синтезатор написанных реплик для людей с нарушением речи.
- Еще у приложения есть функция сохранения истории диалогов.
- Приложение предлагает пользователям каталог готовых фраз, который можно дополнять и использовать в будущем.
В 2022 году ученики «Яндекс» разработали версию приложения уже для IOS. Ребята в нем улучшили звучание синтезатора мужского и женского голосов и оптимизировали расстановку ударений.
И на этом разработчики не остановились. Через некоторое время она адаптировали сервис для казахского языка. Они создали смешанный алфавит из фонем и фонетических правил.
Теперь «Яндекс.Разговор» доступен и с людям с ОВЗ из Казахстана.
Теперь в приложении доступны: русский, казахский и английский.
В настоящее время приложение:
- 1) переводит устную речь в текст и обратно и может использоваться для общения с глухими и слабослышащими людьми.
- 2)Слушает и распознаёт
- 3) Речь распознается и выводится на экране смартфона в виде текста. Чтобы приложение лучше понимало вас, говорите медленно и разборчиво, используйте простые фразы.
- 4) Произносит вслух
- 5) Приложение позволяет напечатать свой ответ, а телефон произнесёт набранную фразу или покажет текст собеседнику — сообщение можно развернуть на весь экран.
- 6) Предлагает готовые фразы
- 7) В приложении есть и готовые реплики: например, если вам надо начать разговор, занять очередь в магазине или попросить о помощи. Вы также можете добавить в список свои варианты.
- 8) Сохраняет историю общения
- 9) Приложение аккуратно записывает все реплики (и устные, и письменные) в виде диалогов. Любой диалог можно продолжить.
Сейчас общаться с помощью ЯндексРазговора можно :
- по-русски;
- с одним человеком;
- в зоне доступа интернета;
- в не очень шумном месте.
Пробуйте. Отзывы и ваше мнение поможет и дальше развивать приложение.