L'IA générative donne vie aux PNJ des jeux vidéo

L'intelligence artificielle générative trouve une application considérable dans le monde du jeu vidéo : donner vie aux personnages non-joueurs (PNJ). Les grands modèles de langage (LLM) permettent d'ajouter des éléments dynamiques à l'expérience de jeu, la rendant plus amusante et imprévisible. 

Les PNJ pilotés par l'IA ont commencé à apparaître en 2023, environ un an après la sortie de ChatGPT d'OpenAI. Depuis la sortie des LLM, l'industrie du jeu vidéo a vu naître de nombreuses applications spécialisées dans l'animation de PNJ. 

L'intelligence artificielle n'est pas un concept nouveau dans les jeux vidéo

Avant l'avènement de l'IA générative, les PNJ étaient gérés par une IA déterministe ou non déterministe. L'IA déterministe leur permet de se déplacer de manière spécifique et prévisible, par exemple horizontalement, verticalement ou en cercles.

De plus, leur vocabulaire est limité à quelques phrases qu'ils répètent en boucle durant la partie, et ils sont incapables de dialoguer. Diablo II (2000) et Final Fantasy Tactics (1997) offrent de bons exemples d'IA déterministe pour les PNJ.

À lire également : OpenAI s’allège et lance un modèle d’IA moins cher appelé GPT-4o mini

L'IA non déterministe des PNJ a un comportement opposé à celui des PNJ déterministes et est plus sophistiquée. Ce type d'IA est imprévisible et repose sur diverses technologies telles que les algorithmes d'apprentissage, l'aléatoire et les arbres de décision. Par exemple, dans certains jeux comme Grand Theft Auto V (2013), les PNJ apprennent et s'adaptent aux mouvements et aux tactiques du joueur.     

Créer un personnage doté d'une IA générative est désormais simple : il suffit de connecter le PNJ à une API LLM comme GPT-4o, Gemini, ou même un modèle open source. Le PNJ pourra ainsi dialoguer avec les joueurs et interagir avec son environnement de manière réaliste.

Le développement des PNJ ne s'arrête pas là ; de nombreuses fonctionnalités pourraient leur être ajoutées, comme des conversations vocales, des émotions et un comportement autonome. L'ajout de telles fonctionnalités est possible grâce à des technologies comme le traitement automatique du langage naturel, l'apprentissage profond, la vision par ordinateur et les modèles émotionnels.

Des startups rivalisent pour construire le meilleur moteur d'IA génératif pour les PNJ

En mars dernier, Ubisoft Paris Studio a présenté NEO NPC, un projet réalisé en collaboration avec Nvidia et Inworld. Ce projet crée des personnages non-joueurs (PNJ) dotés de personnalités et s'appuie sur des scénaristes pour façonner leur histoire et leur style de dialogue. Ces PNJ ne sont pas de simples machines, mais le fruit de la créativité d'un auteur qui imagine leurs expériences, leurs rêves et leurs espoirs.

Ubisoft a présenté une démo de PNJ dotés d'une IA générative lors de la GDC 2024 à San Francisco, en Californie. Selon Sean Hollister de The Verge, Ubisoft a présenté deux PNJ utilisant cette IA générative : Bloom et Iron.

Bloom était plus convaincante au niveau des réponses, des émotions et des interactions, car un concepteur narratif avait travaillé sur l'élaboration de son histoire. Ubisoft a indiqué que le projet est encore à l'état de prototype et n'a pas encore confirmé son intégration dans un jeu vidéo.

Inworld AI, qui a collaboré avec Ubisoft au développement de Bloom et Iron, est une société d'intelligence artificielle spécialisée dans la création de personnages non-joueurs (PNJ) génératifs pour les jeux vidéo. En novembre 2023, Inworld AI a annoncé un partenariat de co-développement avec Xbox pour créer une technologie permettant de gérer les PNJ IA.

En mai 2024, la société a lancé Inworld Voice, un générateur de voix par IA qui propose des expériences vocales dynamiques aux joueurs. L'année dernière, Inworld AI a levé avec succès 50 millions de dollars et sa valorisation atteignait 500 millions de dollars.

À lire également : Les Jeux olympiques de Paris 2024 intégreront un chatbot basé sur l’IA pour les athlètes

, est un autre acteur majeur du marché des PNJ générés par IA. ConvaiElle permet de créer des conversations vocales en temps réel avec ces PNJ. La plateforme permet aux développeurs de créer des PNJ capables d'avoir des échanges dynamiques avec les joueurs. Lors de la conférence GDC 2024, l'entreprise a annoncé de nouvelles fonctionnalités, notamment la mémorisation à long terme des personnages, qui permet aux PNJ de se souvenir des joueurs et d'approfondir leur relation.

Par ailleurs, Altera, une entreprise de San Francisco, a développé un agent IA dédié à Minecraft. Ces agents interagissent et jouent avec les joueurs comme de véritables amis. Lors de son dernier tour de table, Altera a levé avec succès 9 millions de dollars auprès detron, First Spark Venture et d'autres investisseurs. 

Récemment, un groupe d'anciens employés et chercheurs de Google DeepMind a levé 16 millions de dollars pour leur startup, Artificial Agency. L'entreprise propose un moteur de comportement d'IA qui exige des développeurs qu'ils saisissent les rêves, les espoirs et les motivations d'un personnage non-joueur (PNJ). Ces éléments façonnent le comportement de chaque PNJ et sa manière d'interagir avec les joueurs.

Reportage Cryptopolitan de Randa Moses