ATi Studios, создатели Mondly, 18 марта выпустили первое приложение виртуальной реальности для языкового образования, которое объединило технологию искусственного интеллекта (чат-ботов) с распознаванием речи в виртуальной реальности. Learn Languages VR от Mondly позволяет людям переживать живые беседы с виртуальными персонажами на 28 разных языках, не выходя из дома.

Новое VR приложение является первым большим шагом в образовательном VR. Приложение предлагает мгновенную обратную связь, что обогащает словарный запас учащегося. Не обходится без неожиданностей, которые превращают изучение языка в забавный опыт.

Популярный и быстрорастущий технический продукт, платформа для изучения языков от Mondly, уже была скачана более 15 миллионов раз.

Голосовой чат Mondly для изучения языков был впервые выпущен компанией в августе 2016 года. Технология использует расширенное распознавание речи, которое понимает миллионы фраз и слов на 28 разных языках. С момента своего выпуска, он был использован миллионами пользователей Mondly и узнал миллионы новых фраз и ответов, благодаря самообучающемся чат-боту.

Чтобы скрестить чатботов, распознавание речи и VR, компании пришлось разработать новую автоматическую систему распознавания голоса. Alexandru Iliescu, генеральный директор и соучредитель ATi Studios, рассказал о проблемах, связанных с созданием Mondly VR:

«Самая сложная задача заключалась в том, чтобы сделать взаимодействие с речью естественной в VR.

Учитывая, что это VR, мы быстро поняли, что традиционные модели взаимодействия с речью, которые требуют нажатия или голосовой команды для начала распознавания, убьют весь опыт.

Поэтому мы разработали собственную систему автоматического распознавания голоса. Она калибруется до фонового шума комнаты, и игнорирует непреднамеренные звуки. Результат получился потрясающий, разговоры с виртуальными персонажами происходят так же естественно, как разговоры в реальной жизни ».

Изучение 28 разных языков в VR

Mondly VR - возможность изучать языки в виртуальной реальности

Learn Languages VR by Mondly позволяет пользователям практиковать разговоры на новом языке с виртуальными персонажами.

Первая версия предлагает три сценария и 28 языков для изучения:

· The Restaurant — Практикуйтесь, заказывая ду и напитки в небольшом бистро.

· Eurotrain — Разговаривайте и заводите новых друзей в поезде в Европу.

· Отель — закажите себе комнату с прекрасным видом.

Полный список языков: Британский английский, Американский английский, Немецкий, Французский, Итальянский, Испанский, Русский, Румынский, Греческий, Португальский, Арабский, Хорватский, Чешский, Датский, Голландский, Финский, Иврит, Хинди, Венгерский, Японский, Корейский, Норвежский , Польский, Шведский, Турецкий, Украинский, Вьетнамский и Тайский.

Плюсы:

  • На выбор предлагается широкий список языков
  • Может распознавать голос даже при шуме
  • Интуитивное управление

Минусы:

  • Точность определения голоса еще не идеальна
  • Не предоставляет языковые основы

Скачать Learn Languages VR by Mondly бесплатно в Oculus Gear VR Store

​Google Play Store

Chernobylite [CPS] WW

​Apple Store

Или посетите Mondly on the web

Сооснователь и главный автор VRvision.ru. Интересуюсь высокими технологиями и, в частности, виртуальной реальностью. Стараюсь публиковать только самые интересные материалы на тему VR.

ОСТАВЬТЕ ОТВЕТ

Please enter your comment!
Please enter your name here