AI Guide Totem — Museo Emilio Carafa

Para la inauguración de una nueva muestra en el Museo Emilio Carafa, el museo y la Secretaría de Cultura querían algo que hiciera comulgar el arte con la tecnología. Más que un guía, pedían un consultor: alguien a quien la gente pudiera preguntarle dónde estaba una obra, dónde quedaba el baño, qué había en el tercer piso, si el catálogo tenía algo de tal artista. En voz alta, en tiempo real, sobre un tótem con pantalla táctil.

La vara era un guía que se sintiera presente, no un kiosco con un menú. Tenía que hablar y mostrar texto a la vez por accesibilidad, mantenerse siempre en personaje y, lo más importante, no inventar jamás nada sobre la colección.

El primer obstáculo era la escala. En la pieza de VR de la Academia, animar la cara de un personaje para un puñado de líneas ya nos había llevado varios días; hacer eso para las infinitas respuestas posibles de un guía era inviable. Así que cambiamos de tecnología y usamos Convai, que corre en la nube con un plugin para Unreal Engine, su propio modelo de lenguaje y text-to-voice.

En lugar de un MetaHuman paramétrico, el personaje en pantalla es un gemelo fotogramétrico de un integrante real de nuestro equipo de diseño, escaneado y llevado a Unreal Engine. El parecido era tan alto que poner a la persona de verdad al lado del tótem generaba reacción en el público. Fue también nuestra primera vez diseñando una interfaz dentro de un entorno 3D, un HUD, y la mantuvimos a propósito bien simple: pantalla táctil, la instrucción "tocá y mantené para hablar" y un ícono de mano. Con eso alcanzó para que casi todos entendieran cómo interactuar, sin periféricos extra.

Las alucinaciones, y en concreto las de autoría y fechas. El instinto de un modelo de lenguaje es darte siempre una respuesta, y acá eso era una bomba: preguntado por un artista del que no tenía datos, inventaba uno con total seguridad. Que atribuyera el cuadro equivocado al artista equivocado —el equivalente a decir que Picasso pintó El nacimiento de Venus— habría sido un bochorno para el museo. Y empeoraba con las actualizaciones: una versión que se portaba bien empezaba a fallar después de un update. Lo peleamos por dos lados: dándole forma al formato de la base de datos para que produjera la menor cantidad posible de alucinaciones, y escribiendo restricciones explícitas y repetidas sobre qué decir y qué no, más límites para mantenerlo lejos de cualquier cosa política, violenta o fuera de personaje.

Funcionó en la inauguración de la muestra y convocó a mucha gente. Nos llevamos dos cosas. Una práctica: en un salón ruidoso, la acústica arruina la captación de voz, así que conviene llevar un buen micrófono externo. Y una que abrió otro proyecto: el mismo personaje se extendió a un agente que la gente podía llevarse en el celular, con la misma identidad y la misma base de datos (ver el proyecto del guía móvil).