Описание проекта
Живая русалка в сказочном дубе
Виртуальная русалка, которая в реальном времени разговаривает с каждой экскурсионной группой: актриса из скрытой будки управляет её лицом и телом, а нейросеть превращает 3D-персонажа в живую картину.
- Заказчик
- Национальный центр «Россия»
- Площадка
- НЦ «Россия», Москва
- Год реализации
Задача
Экспозиции был нужен сказочный персонаж, который по-настоящему общается с детьми — реагирует на группу, загадывает загадки, подсказывает и шутит, — а не показывает всем одно и то же записанное видео.
Что сделала команда Awake!
Мы собрали систему живого управления персонажем. Актриса в будке работает без костюма захвата движения: Kinect отслеживает голову, плечи, руки и пальцы, а iPhone с Live Link Face передаёт мимику в Unity. Русалка появляется на трёх экранах, встроенных в сказочный дуб, синхронно с видео в Resolume и светом в зале. Поверх 3D-рендера работает нейросетевая стилизация видео — персонаж выглядит как ожившая картина. Панель оператора переключает режимы ожидания и эфира и ведёт сценарий: девять загадок с подсказками, кот и световые акценты.
Результат
Первый рабочий прототип с трекингом тела и лица был готов на следующий день после постановки задачи. В декабре 2025 года зона открылась для экскурсий, и у каждой группы свой разговор с русалкой.
Технологии и методы
Unity, трекинг тела Kinect, iPhone Live Link Face, нейросетевая стилизация видео в реальном времени, Resolume, панель оператора