GTA V : un mod permet de discuter avec les PNJ en temps réel grâce à l’IA, sortie gratuite la semaine prochaine

Les moddeurs ne cessent de repousser les limites de l’immersion. Un nouvel outil, propulsé par l’intelligence artificielle, propose désormais de dialoguer en temps réel avec les personnages non-joueurs de Grand Theft Auto V, directement au micro. Baptisé NPCTalk, ce projet open-source pourrait à terme s’appliquer à de nombreux jeux moddables.

Des dialogues dynamiques et personnalisés

Contrairement aux systèmes classiques qui utilisent des répliques préenregistrées, NPCTalk génère les conversations à la volée grâce à des modèles d’IA. Les joueurs peuvent s’adresser à presque n’importe quel personnage de GTA V via leur micro et obtenir une réponse contextuelle, qui tient compte de la personnalité du PNJ et de la situation. Les développeurs ont montré le dispositif avec des personnages comme Michael ou Lamar, mais aussi avec des piétons ou des policiers. Ces derniers peuvent même réagir physiquement à la conversation par des animations ou en suivant certains ordres verbaux.

Cette technologie repose sur plusieurs modèles d’IA combinés. Nemotron ASR de NVIDIA se charge de la reconnaissance vocale, tandis que Qwen 3.8 27B génère les dialogues en temps réel via Cerebras. La synthèse et le clonage vocal sont gérés par Fish Audio Drama 3, permettant aux personnages de répondre avec une voix proche de l’originale. Le modèle vocal tourne sur un GPU NVIDIA H100 dans le cloud, et TypeSafe Jev pilote les actions des PNJ.

La réactivité du système est notable. Bien que le développeur ait initialement annoncé des temps de réponse inférieurs à une seconde, la documentation technique indique un délai d’environ 1,15 à 2,2 secondes entre la fin de la phrase du joueur et le début de la réponse du PNJ en mode « appui pour parler ». La détection en microphone ouvert ajoute environ 0,7 seconde de latence supplémentaire.

Fait intéressant, NPCTalk a été développé avec l’aide de Claude Code. Les créateurs ont rassemblé leur savoir-faire en une série de compétences réutilisables pour agents IA, compatibles avec Claude Code, Codex, Cursor, Gemini CLI et d’autres assistants de programmation. Cela pourrait permettre à d’autres développeurs et moddeurs d’intégrer la technologie dans leurs jeux.

Cependant, NPCTalk n’est pas un mod universel à installer en un clic. Chaque jeu nécessite une intégration spécifique, et l’implémentation actuelle ne fonctionne pour l’instant que dans le mode solo de GTA V Legacy. De plus, bien que la boîte à outils soit open-source sous licence MIT, l’utilisation des services cloud et des infrastructures de GPU nécessaires peut engendrer des coûts.

Le kit NPCTalk est déjà disponible sur GitHub. Le développeur a annoncé qu’un mod jouable gratuit pour GTA V sera publié la semaine prochaine.

Bien que cette technologie soit encore expérimentale, elle ouvre une fenêtre sur un avenir où les PNJ ne seraient plus cantonnés à des dialogues prédéfinis, rendant potentiellement les mondes virtuels bien plus interactifs.

Source : universal-modder sur X