NVIDIA et ses développeurs lancent des personnages numériques réalistes pour les jeux et les applications avec NVIDIA Avatar Cloud Engine

CES — NVIDIA a présenté aujourd’hui des microservices de production pour le Moteur cloud NVIDIA Avatar (ACE) qui permettent aux développeurs de jeux, d’outils et de middleware d’intégrer des modèles d’IA générative de pointe dans les avatars numériques de leurs jeux et applications.

Les nouveaux microservices ACE permettent aux développeurs de créer des avatars interactifs à l’aide de modèles d’IA tels que NVIDIA Omniverse Audio2Face™ (A2F), qui crée des animations faciales expressives à partir de sources audio, et NVIDIA Riva la reconnaissance vocale automatique (ASR), pour créer des applications vocales et de traduction multilingues personnalisables à l’aide de l’IA générative.

Les développeurs adoptant ACE incluent Charisme.AI, Convai, Dans le monde, miHoYo, Jeux NetEase, Notre paume, Tencent, Ubisoft et UneeQ.

« Les technologies d’IA générative transforment pratiquement tout ce que nous faisons, et cela inclut également la création de jeux et le gameplay », a déclaré Keita Iida, vice-président des relations avec les développeurs chez NVIDIA. “NVIDIA ACE ouvre de nouvelles possibilités aux développeurs de jeux en peuplant leurs mondes avec des personnages numériques réalistes tout en supprimant le besoin de dialogues pré-scénarisés, offrant ainsi une plus grande immersion dans le jeu.”

Les meilleurs développeurs de jeux et d’avatars interactifs adoptent NVIDIA ACE

Les meilleurs développeurs de jeux et d’avatars interactifs sont des pionniers dans la manière dont les technologies ACE et d’IA générative peuvent être utilisées pour transformer les interactions entre les joueurs et les personnages non jouables (PNJ) dans les jeux et les applications.

“Pendant des années, NVIDIA a été le joueur de flûte des technologies de jeu, proposant des moyens nouveaux et innovants de créer des jeux”, a déclaré Zhipeng Hu, vice-président senior de NetEase et chef du groupe commercial LeiHuo. “NVIDIA rend les jeux plus intelligents et plus jouables grâce à l’adoption de technologies d’IA de jeu, ce qui crée finalement une expérience plus immersive.”

“Il s’agit d’un moment marquant pour l’IA dans les jeux”, a déclaré Tencent Games. “NVIDIA ACE et Tencent Games contribueront à jeter les bases qui permettront d’introduire dans les jeux vidéo des avatars numériques dotés de personnalités et d’interactions individuelles et réalistes.”

NVIDIA ACE donne vie aux personnages du jeu

Les PNJ ont toujours été conçus avec des réponses et des animations faciales prédéterminées. Cela limitait les interactions entre les joueurs, qui avaient tendance à être transactionnelles, de courte durée et, par conséquent, ignorées par la majorité des joueurs.

« Les personnages génératifs basés sur l’IA dans les mondes virtuels débloquent divers cas d’utilisation et expériences qui étaient auparavant impossibles », a déclaré Purnendu Mukherjee, fondateur et PDG de Convai. “Convai exploite Riva ASR et A2F pour permettre des PNJ réalistes avec des temps de réponse à faible latence et une animation naturelle haute fidélité.”

Pour montrer comment ACE peut transformer les interactions avec les PNJ, NVIDIA a travaillé avec Convai pour étendre la démo NVIDIA Kairos, qui a fait ses débuts au Computex, avec un certain nombre de nouvelles fonctionnalités et l’inclusion de microservices ACE.

Dans le dernière version de Kairos, Riva ASR et A2F sont largement utilisés, améliorant l’interactivité des PNJ. Le nouveau cadre de Convai permet aux PNJ de converser entre eux et leur donne conscience des objets, leur permettant de récupérer et de livrer des objets dans les zones souhaitées. De plus, les PNJ acquièrent la capacité de guider les joueurs vers des objectifs et de traverser des mondes.

Les microservices de reconnaissance vocale automatique Audio2Face et Riva sont disponible dès maintenant. Les développeurs d’avatars interactifs peuvent intégrer les modèles individuellement dans leurs pipelines de développement.