L’intelligence artificielle devient assistant personnel dans les jeux vidéo

Lors du Computex 2024, Nvidia a présenté le projet G-Assist, qui vise à mettre les connaissances en matière de jeux vidéo du monde entier à la portée des joueurs. Posez simplement une question sur les performances de votre jeu ou de votre système, et l’IA fournit des réponses contextualisées. Le projet G-Assist reçoit une entrée vocale ou textuelle du joueur, ainsi qu’un instantané de la fenêtre de jeu. L’instantané est traité par des modèles de vision par ordinateur qui fournissent une connaissance du contexte et une compréhension spécifique à l’application pour le modèle de langage (LLM), qui est connecté à une base de données de solutions et de détails sur les jeux individuels. Le résultat est une réponse personnalisée et approfondie, à la fois textuelle et vocale, basée sur ce qui se passe à l’écran.

La vision et les modèles linguistiques de G-Assist peuvent être personnalisés par les développeurs pour un jeu ou une application spécifique, garantissant ainsi un haut degré de précision et de perspicacité. Ces modèles d’IA personnalisés peuvent être exécutés dans le cloud ou accélérés localement par les PC et ordinateurs portables GeForce RTX AI. Pour démontrer la puissance de G-Assist, Nvidia s’est associé au Studio Wildcard pour une démonstration technologique utilisant ARK: Survival Ascended, leur jeu de survie en monde ouvert rempli de dinosaures développé avec Unreal Engine 5. Activé via une combinaison de touches ou une phrase, l’assistant peut aider les joueurs avec des questions fréquemment posées qui nécessitent souvent des recherches en ligne : qu’il s’agisse de missions, d’objets ou de boss difficiles à affronter.

Grâce aux modèles d’IA qui comprennent ce qui se passe dans la fenêtre de jeu, l’assistant peut conseiller s’il faut éviter un ennemi ou suggérer différentes approches pour en affronter un autre. Et comme l’assistant est conscient du contexte, il peut adapter ses recommandations en fonction du jeu du joueur : il peut analyser les points de compétence, le menu de fabrication et les fonctionnalités débloquées, par exemple, et suggérer quoi choisir pour aider les joueurs à conquérir des zones de niveau supérieur et des ennemis. . G-Assist peut également être utile pour optimiser les performances du PC. Par exemple, avec une simple invite, G-Assist peut évaluer la configuration et les performances de votre système et les optimiser instantanément pour une expérience optimale. L’assistant IA peut suivre les fréquences d’images, la consommation d’énergie, la latence du PC et d’autres statistiques matérielles, suggérant des moyens de les améliorer si nécessaire.