Описание проекта
Цифровой сотрудник, который ведёт экскурсию
Голографический персонаж в полный рост, который голосом проверяет знания гостей, а затем отвечает на любые вопросы о музее по его собственной базе знаний.
- Заказчик
- Музей Министерства финансов России
- Год реализации
Задача
Первая интерактивная зона музея должна была встречать гостей, вовлекать их в историю министерства и затем отвечать на всё, что им интересно, — живой речью, без клавиатуры на виду.
Что сделала команда Awake!
Поведение персонажа собрано из видеосостояний: ожидание, вступление, вопрос, слушание, реакции, ответы и прощание. Гость отвечает вслух, Whisper распознаёт речь, а ИИ определяет смысл ответа — «да», «нет», «не знаю», «не понял», «отвечу позже» — и запускает нужную реакцию. После двух вопросов викторины гид переходит к свободному разговору голосом или текстом, и ChatGPT отвечает по базе знаний музея со встроенной модерацией. На площадке мы прошли много итераций — кнопки пропуска, три варианта прощания, переходы, звуки — и перестроили интерфейс, когда экран оказался выше проектного.
Результат
Цифровой сотрудник стал первым интерактивом музея и работает экскурсоводом, у которого не кончаются ответы.
Технологии и методы
Unity, распознавание речи Whisper, ChatGPT с базой знаний музея, сценарий на видеосостояниях, голографический экран