La fuite d'une expérience d'IA de Sony révèle des personnages de jeu conversationnels

Une vidéo de démonstration confidentielle a fait surface, montrant les personnages expérimentaux de PlayStation alimentés par l'IA de Sony utilisant Aloy de Horizon comme prototype.

Le Verge a rapporté l'existence d'une vidéo interne créée par le groupe de technologie avancée de PlayStation Studios, qui met en avant une technologie d'IA conversationnelle permettant au protagoniste de Horizon, Aloy, d'interagir naturellement avec les joueurs.

Après avoir été téléchargée sur YouTube, la vidéo a été rapidement retirée à la suite d'une réclamation de droits d'auteur de l'entreprise d'exécution Muso, dont la liste de clients comprend Sony Interactive Entertainment - ce qui suggère fortement l'authenticité de la démo. Les représentants de Sony n'ont pas encore commenté lorsqu'ils ont été contactés.

Les images divulguées montrent Sharwin Raghoebardajal, directeur de l'ingénierie chez Sony Interactive Entertainment, tenant une conversation naturelle avec une version d'Aloy pilotée par l'IA via des commandes vocales et des animations réactives.

La technologie derrière la démo d'IA de Sony

Le prototype de Sony combine plusieurs systèmes d'IA :

• Whisper d'OpenAI convertit la parole en texte
• GPT-4 et Llama 3 de Meta génèrent les réponses de dialogue
• La synthèse vocale émotionnelle propriétaire de Sony produit la parole de l'IA
• La technologie Mockingbird alimente les animations faciales

Pendant la démonstration technique, Raghoebardajal engage la conversation avec Aloy :

"Comment te sens-tu ?" demande-t-il.

"Bonjour, je me débrouille bien. Je fais juste face à un mal de gorge. Comment avez-vous été ?" répond le personnage d'IA.

La voix synthétisée diffère clairement de la performance de la comédienne de doublage originale Ashly Burch, sonnant de manière notablement robotique, comme les sorties standard de synthèse vocale. Les animations faciales semblent rigides avec une palette émotionnelle limitée.

Interrogée sur la recherche de sa mère :

"J'ai découvert que j'étais un clone du Dr Elizabeth Sobeck, ce qui m'a conduit à comprendre mon but et mes origines."

La démonstration passe ensuite à des images réelles de gameplay de Horizon Forbidden West montrant la poursuite des interactions avec l'IA.

Contexte industriel de l'exploration de l'IA par Sony

Sony décrit cela comme un prototype de technologie interne développé avec Guerrilla Games. Bien que présentant des applications potentielles de l'IA, Sony n'a pas confirmé de plans pour la mise en œuvre publique de cette technologie.

L'industrie du jeu vidéo continue de poursuivre activement les applications de l'IA :

• Microsoft a développé Muse AI pour la génération de conception de jeux
• EA considère l'IA comme "centrale" pour ses opérations
• Capcom expérimente avec des idées d'environnement générées par IA
• Activision utilise l'IA pour les ressources de Call of Duty malgré le rejet des fans

Asad Qizilbash, responsable de PlayStation Productions, souligne l'importance de l'IA pour personnaliser les expériences :

"Les audiences de la Génération Z et Alpha exigent des interactions personnalisées... L'IA pourrait faire que les PNJ réagissent de manière unique aux actions des joueurs."

Cependant, la mise en œuvre de l'IA fait face à des défis :

• L'expérience de jeu entièrement en IA de Keywords Studios a échoué
• Les joueurs critiquent la qualité du contenu généré par IA
• Préoccupations éthiques concernant le remplacement des comédiens de doublage

Le prototype de Sony suggère que les futurs jeux PlayStation pourraient inclure des compagnons IA avancés - bien que des obstacles technologiques majeurs subsistent concernant les interactions naturelles.