ATi Studios, создатели Mondly, 18 марта выпустили первое приложение виртуальной реальности для языкового образования, которое объединило технологию искусственного интеллекта (чат-ботов) с распознаванием речи в виртуальной реальности. Learn Languages VR от Mondly позволяет людям переживать живые беседы с виртуальными персонажами на 28 разных языках, не выходя из дома.
Новое VR приложение является первым большим шагом в образовательном VR. Приложение предлагает мгновенную обратную связь, что обогащает словарный запас учащегося. Не обходится без неожиданностей, которые превращают изучение языка в забавный опыт.
Популярный и быстрорастущий технический продукт, платформа для изучения языков от Mondly, уже была скачана более 15 миллионов раз.
Голосовой чат Mondly для изучения языков был впервые выпущен компанией в августе 2016 года. Технология использует расширенное распознавание речи, которое понимает миллионы фраз и слов на 28 разных языках. С момента своего выпуска, он был использован миллионами пользователей Mondly и узнал миллионы новых фраз и ответов, благодаря самообучающемся чат-боту.
Чтобы скрестить чатботов, распознавание речи и VR, компании пришлось разработать новую автоматическую систему распознавания голоса. Alexandru Iliescu, генеральный директор и соучредитель ATi Studios, рассказал о проблемах, связанных с созданием Mondly VR:
«Самая сложная задача заключалась в том, чтобы сделать взаимодействие с речью естественной в VR.
Учитывая, что это VR, мы быстро поняли, что традиционные модели взаимодействия с речью, которые требуют нажатия или голосовой команды для начала распознавания, убьют весь опыт.
Поэтому мы разработали собственную систему автоматического распознавания голоса. Она калибруется до фонового шума комнаты, и игнорирует непреднамеренные звуки. Результат получился потрясающий, разговоры с виртуальными персонажами происходят так же естественно, как разговоры в реальной жизни ».
Изучение 28 разных языков в VR
Learn Languages VR by Mondly позволяет пользователям практиковать разговоры на новом языке с виртуальными персонажами.
Первая версия предлагает три сценария и 28 языков для изучения:
· The Restaurant — Практикуйтесь, заказывая ду и напитки в небольшом бистро.
· Eurotrain — Разговаривайте и заводите новых друзей в поезде в Европу.
· Отель — закажите себе комнату с прекрасным видом.
Полный список языков: Британский английский, Американский английский, Немецкий, Французский, Итальянский, Испанский, Русский, Румынский, Греческий, Португальский, Арабский, Хорватский, Чешский, Датский, Голландский, Финский, Иврит, Хинди, Венгерский, Японский, Корейский, Норвежский , Польский, Шведский, Турецкий, Украинский, Вьетнамский и Тайский.
Плюсы:
- На выбор предлагается широкий список языков
- Может распознавать голос даже при шуме
- Интуитивное управление
Минусы:
- Точность определения голоса еще не идеальна
- Не предоставляет языковые основы
Скачать Learn Languages VR by Mondly бесплатно в Oculus Gear VR Store
Google Play Store
Apple Store
Или посетите Mondly on the web