Учебное приложение с игровым подходом, AI и AR/VR
- Backend
- Design
- C#
- AR/VR SDK
- Speech Recognition API
- Backend Services
У вас есть задача? Давайте обсудим!
О клиенте
Компания развивает цифровые продукты для образования и раннего развития детей. Основное направление — создание интерактивных приложений, которые помогают школьникам и дошкольникам осваивать иностранные языки и базовые предметы через игровые сценарии, технологии дополненной и виртуальной реальности, а также элементы геймификации для вовлечения.
О проекте
Учебное приложение с игровым подходом и AR/VR. Ребенок осваивает первые 135 английских слов с помощью карточек и общения с виртуальным героем. Система распознает речь (акценты), а также карточки, попадающие под камеру устройства. Игрок отправляется в увлекательное путешествие по разным странам мира вместе с мультяшным героем, который помогает учить язык и мотивирует продолжать обучение.
Описание задачи
Бизнесу было важно сделать приложение одновременно развивающим и увлекательным, а также подготовить его к коммерческому запуску. У клиента стояла задача объединить в одном продукте:
- Игровой процесс с вовлекающей механикой;
- Распознавание речи и карточек;
- Анимацию и озвучку персонажей;
- Удобную навигацию и монетизацию.
Реализация
Команда RedLab совместно с заказчиком выполнила следующие работы:
- Синхронизировали озвучку и анимацию персонажа: герой говорит и двигается естественно, создавая эффект живого общения и погружения в процесс.
- Настроили навигацию внутри приложения: плавные переходы между локациями и уровнями обеспечили логичный и удобный пользовательский путь, минимизировав риск потери интереса у ребенка.
- Провели интеграцию с библиотекой распознавания карточек: система определяет карточку в кадре и активирует соответствующую игровую сцену, позволяя ребенку сразу видеть результат своих действий.
- Интегрировали backend-сценарий для голосового управления: игра научилась распознавать команды пользователя и выполнять действия в реальном времени, что сделало взаимодействие с героем более динамичным и увлекательным.
- Разработали принципы взаимодействия игры с внешними сервисами и пользователями, а также внедрили систему монетизации, чтобы продукт был устойчивым с точки зрения бизнеса и приносил ценность клиенту при масштабировании.
