Вместе мы сможем больше!

Изображение: логотип ХМАО

Ханты-Мансийская общественная
региональная организация
Общероссийской общественной организации
«Всероссийское общество инвалидов»

Контакты

г. Ханты-Мансийск, ул. Пионерская, 27

Сегодня расскажем про приложение, разработанное на основе технологии распознавания речи Yandex SpeechKit

Сегодня расскажем про приложение, разработанное на основе технологии распознавания речи Yandex SpeechKit

Искусственный интеллект, который используют для настройки голосовых помощников и автоматизации кол-центров, теперь позволяет слабослышащим людям безбарьерно общаться с окружающими.

История, о которой мы хотим вам рассказать, началась около десяти лет назад, в 2015 году. Студенты Московского физико-технологического института (МФТИ) задумали сделать Приложение специальное для глухих людей.
Прежде они исследовали потребности слабослышащих и глухих людей и выявили , что не все из них знают русский жестовый язык (РЖЯ)
и могут свободно поддерживать коммуникацию.
Студенты, узнав все пожелания целевой аудитории , разработали прототип приложения на платформе Android.

Как на практике работает приложение.
Функционал сервиса разработчики разделили
на две основные части:

  • Первая часть это распознавание речи и перевод ее в текст — для людей с депривацией слуха.
  • Вторая часть , это синтезатор написанных реплик для людей с нарушением речи.
  • Еще у приложения есть функция сохранения истории диалогов.
  • Приложение предлагает пользователям каталог готовых фраз, который можно дополнять и использовать в будущем.

В 2022 году ученики «Яндекс» разработали версию приложения уже для IOS. Ребята в нем улучшили звучание синтезатора мужского и женского голосов и оптимизировали расстановку ударений.

И на этом разработчики не остановились. Через некоторое время она адаптировали сервис для казахского языка. Они создали смешанный алфавит из фонем и фонетических правил.
Теперь «Яндекс.Разговор» доступен и с людям с ОВЗ из Казахстана.
Теперь в приложении доступны: русский, казахский и английский.

В настоящее время приложение:

  • 1) переводит устную речь в текст и обратно и может использоваться для общения с глухими и слабослышащими людьми.
  • 2)Слушает и распознаёт
  • 3) Речь распознается и выводится на экране смартфона в виде текста. Чтобы приложение лучше понимало вас, говорите медленно и разборчиво, используйте простые фразы.
  • 4) Произносит вслух
  • 5) Приложение позволяет напечатать свой ответ, а телефон произнесёт набранную фразу или покажет текст собеседнику — сообщение можно развернуть на весь экран.
  • 6) Предлагает готовые фразы
  • 7) В приложении есть и готовые реплики: например, если вам надо начать разговор, занять очередь в магазине или попросить о помощи. Вы также можете добавить в список свои варианты.
  • 8) Сохраняет историю общения
  • 9) Приложение аккуратно записывает все реплики (и устные, и письменные) в виде диалогов. Любой диалог можно продолжить.

Сейчас общаться с помощью ЯндексРазговора можно :

  • по-русски;
  • с одним человеком;
  • в зоне доступа интернета;
  • в не очень шумном месте.

Пробуйте. Отзывы и ваше мнение поможет и дальше развивать приложение.


Зарегистрируйтейсь, чтобы участвовать в обсуждении.