Un passionné crée NPCTalk, un mod IA pour GTA V permettant de dialoguer avec n'importe quel PNJ
Un développeur passionné, connu sous le pseudonyme Universal Modder, a présenté NPCTalk, un ensemble d’outils pour Grand Theft Auto V. La plateforme ajoute au jeu des dialogues qui ne sont pas programmés à l’avance et qui se construisent au fil de la conversation.
Le joueur peut parler à n’importe quel personnage non jouable par le microphone, et les réponses sont prononcées avec des voix clonées par intelligence artificielle, proches des voix originales. Contrairement aux systèmes classiques reposant sur des répliques préenregistrées, NPCTalk construit l’échange en tenant compte du contexte, de la personnalité du personnage et de l’environnement.
La vidéo de démonstration montre que les personnages ne se contentent pas de répondre, mais réagissent aussi physiquement aux propos de l’utilisateur. Ils peuvent exécuter des animations, obéir à des commandes vocales et, dans certains cas, attaquer le joueur.
Le système repose sur l’association de plusieurs modèles neuronaux et services. La reconnaissance vocale est assurée par NVIDIA Nemotron ASR, tandis que la génération des répliques en temps réel est confiée à Qwen 3.8 27B sur la plateforme Cerebras. Le clonage de la voix et la synthèse vocale relèvent du modèle Fish Audio Drama 3.
Le modèle vocal fonctionne sur un GPU cloud NVIDIA H100, alors que les actions des personnages sont traitées par le composant TypeSafe Jev. D’après la documentation, en mode appuyer pour parler, le délai entre la fin de la phrase du joueur et le début de la réponse du PNJ est d’environ 1,15 à 2,2 secondes. La détection d’un microphone activé ajoute environ 0,7 seconde.
Claude Code a été utilisé pour créer NPCTalk, et l’expérience accumulée a été rassemblée dans un ensemble de compétences réutilisables pour agents IA. En théorie, cela permet d’adapter la technologie à d’autres jeux, mais chaque projet exige une intégration distincte. Pour l’instant, la solution n’a été présentée que dans le mode solo de GTA V Legacy.
Le code source de NPCTalk est déjà disponible sur GitHub. L’auteur promet de publier la semaine prochaine un mod gratuit prêt à être joué.