PlayStation Studios muestra como es posible usar IA para mantener conversaciones con personajes de videojuegos realistas

Aunque la IA existe desde hace mucho tiempo no ha sido hasta hace unos pocos años cuando realmente se ha vuelto muy popular tras convertirla en una herramienta que puede ser empleada en todo tipo de tareas. Hemos visto ya muchos modelos de IA generativa capaz de crear contenido, resolver problemas o automatizar tareas que son repetitivas y costosas. La IA tiene su parte positiva y negativa, pues si bien nos permite ser mucho más productivos también puede acabar con muchos trabajos. Sony PlayStation Studios ha mostrado sus avances en el uso de la IA para crear personajes de juegos y animarlos de forma realista usando un modelo que convierte el audio a animaciones faciales.

En el momento en el que nos encontramos, tenemos la capacidad de poder utilizar un montón de IA que nos permitirán aumentar nuestra productividad y ahorrarnos mucho dinero. Tanto si queremos crear imágenes, textos, audio, vídeo y hasta música son solo algunos de los ejemplos de IA generativa que hay actualmente. Además de estas, tenemos otros modelos de IA que son más específicos a la hora de generar otro tipo de contenido o que sirven para hacer tareas repetitivas que llevarían mucho tiempo. Precisamente ahí es donde vemos más interesante la inteligencia artificial, aunque también hemos visto que está llegando a un punto donde pueda sustituir a muchos puestos de trabajo.

PlayStation Studios utiliza a Aloy de Horizon para mostrar que es posible mantener conversaciones con personajes de juegos usando IA

La llegada de ChatGPT ya creó esa incertidumbre al ser capaz de reemplazar a personas que se dedican a los servicios de asistencia a los clientes. Si bien no hacía un trabajo perfecto, la IA era más que suficiente para muchas empresas que empezaron a probarla y algunas llegaron a reemplazar a sus trabajadores con esta. Si avanzamos hasta el momento actual, tenemos muchos otros modelos de IA que pueden llegar a realizar otro tipo de tareas más concretas y así es como vuelve de nuevo el temor. En esta ocasión nos toca hablar de la IA en un mundo tan complejo como el de los videojuegos, pues aquí ya hemos visto que han empezado a dar sus primeros pasos y en el caso de Roblox su inteligencia artificial de código abierto puede generar mapas 3D a partir de texto.

Por otro lado, tenemos a PlayStation Studios que involucra un gran número de desarrolladores que hacen videojuegos para Sony y entre estos tenemos a Insomniac Games, Bluepoint, Bend Studio, Santa Monica Studio, Polyphony Digital, Naughty Dog y otros. En un vídeo de PlayStation Studio (que ya han eliminado de YouTube), podemos ver como han utilizado un modelo de IA "Audio-to-Face" que les ha permitido hacer que básicamente usar audio, extraerlo y convertirlo en curvas que sirven para animar el personaje. Según ha narrado el director de ingeniería de software, Sharwin Raghoebardajal, esto permite crear personajes con IA que pueden mantener una conversación con los jugadores y todo es bastante realista.

Han utilizado la IA OpenAI Whisper, GPT-4, Llama 3, EVS y Mockingbird de Sony para hacerlo posible

Por desgracia, el vídeo original se ha eliminado y el que hay en X es de baja calidad, pero sirve para ver de que se trata todo. Podemos ver que han usado el personaje de Aloy de Horizon: Forbidden West para la prueba y han tardado alrededor de 7 días para crear esta demostración que enseñarían en el GDC de los Ángeles. En el vídeo podemos ver que hacen preguntas a Aloy sobre como está, sobre sus opiniones sobre Horizon y habla un poco sobre sus objetivos en el juego.

Podemos ver que la voz y las animaciones son buenas, por lo que aquí no nos encontramos con nada raro. De hecho, sorprende el hecho de que podamos tener una conversación con un personaje de videojuegos a ese nivel. Esta demo técnica debería funcionar en PS5 (aunque la han probado en PC) y hace uso de la IA OpenAI Whisper para convertir la voz a texto mientras que para las conversaciones en tiempo real se emplea tanto GPT-4 como Llama 3. Para finalizar, Sony usa la síntesis de voz emocional (EVS) para generar el audio de Aloy y la animación facial para el audio utiliza la tecnología Mockingbird de la empresa japonesa.

La entrada PlayStation Studios muestra como es posible usar IA para mantener conversaciones con personajes de videojuegos realistas aparece primero en El Chapuzas Informático.