Estudo de caso do projeto

Um funcionário digital que guia a visita ao museu

Uma personagem holográfica de corpo inteiro que faz perguntas aos visitantes por voz e depois responde a qualquer questão sobre o museu a partir da sua própria base de conhecimento.

Cliente
Museu do Ministério das Finanças da Rússia
Ano de conclusão

O desafio

A primeira zona interativa do museu tinha de receber os visitantes, envolvê-los na história do ministério e depois responder a tudo o que quisessem saber — em linguagem natural, sem um teclado à vista.

O que a Awake! desenvolveu

O comportamento da personagem é construído a partir de estados de vídeo: espera, apresentação, pergunta, escuta, reações, respostas e despedida. O visitante responde em voz alta; o Whisper reconhece a fala e a IA classifica a resposta — sim, não, “não sei”, pouco clara, “mais tarde” — e aciona a reação correspondente. Depois de duas perguntas do quiz, o guia passa a uma conversa aberta por voz ou texto, e o ChatGPT responde a partir da base de conhecimento do museu, com moderação integrada. Fizemos muitas iterações no local — botões para saltar, três despedidas, transições, sons — e voltámos a dispor a interface quando se verificou que o ecrã estava montado mais alto do que o previsto.

Resultado

O funcionário digital tornou-se a interação de abertura do museu e funciona como um guia que nunca fica sem respostas.

Tecnologias e métodos

Unity, reconhecimento de fala com Whisper, ChatGPT com a base de conhecimento do museu, máquina de estados de vídeo, ecrã holográfico