NVIDIA ACE (Avatar Cloud Engine) est une suite de technologies alimentées par l'IA développée par NVIDIA pour donner vie aux personnages de jeux et aux avatars numériques avec des interactions intelligentes et en temps réel. La plateforme combine plusieurs capacités d'IA, notamment la compréhension du langage naturel, la reconnaissance vocale, la synthèse vocale, l'animation faciale et la modélisation des émotions, pour créer des personnages de jeux qui peuvent voir, entendre, parler et répondre naturellement aux joueurs. NVIDIA ACE comprend plusieurs composants clés : Audio2Face génère des animations faciales réalistes à partir d'entrées audio, permettant aux personnages de synchroniser les lèvres et d'exprimer les émotions en temps réel ; Riva fournit des capacités de reconnaissance vocale automatique et de synthèse vocale optimisées pour les voix des personnages de jeux ; et NeMo alimente la compréhension du langage naturel qui permet aux personnages de comprendre et de répondre intelligemment au dialogue des joueurs. ACE tire parti de l'infrastructure informatique GPU de NVIDIA et peut s'exécuter localement sur le matériel NVIDIA RTX ou via un déploiement cloud, offrant des options d'intégration flexibles pour les studios de jeux. La plateforme fournit des microservices que les développeurs peuvent intégrer dans leurs moteurs de jeu et pipelines existants. NVIDIA a démontré la technologie ACE à travers des projets tels que la démo Kairos, présentant des personnages photoréalistes capables de conversation en temps réel dans un cadre de restaurant de ramen. ACE est conçu pour les studios de jeux AAA, les entreprises de divertissement interactif et les développeurs créant les expériences NPC de nouvelle génération. La technologie est disponible via le programme de développeurs de NVIDIA, avec des licences d'entreprise et des arrangements de partenariat pour les studios intégrant ACE dans les titres de jeux commerciaux. NVIDIA ACE représente la vision de l'entreprise pour l'avenir des humains numériques interactifs dans les jeux et au-delà.

Frameworks d'agents IA

NVIDIA ACE fournit un cadre basé sur les microservices pour construire des agents IA autonomes et interactifs incarnés en tant que personnages de jeu. La plateforme combine les capacités de perception, de compréhension, de raisonnement et d'expression dans une architecture intégrée que les développeurs peuvent personnaliser et déployer pour créer des agents de personnages auto-dirigés dans des environnements interactifs.

Outils d'animation IA

NVIDIA ACE inclut Audio2Face, une technologie d'animation faciale pilotée par l'IA qui génère des mouvements faciaux de personnages réalistes à partir d'une entrée audio seule. Cela élimine le besoin de capture de mouvement traditionnelle ou d'animation par image-clé manuelle pour les expressions faciales, accélérant considérablement la production de séquences de dialogue de personnages animés.

Generateurs d'avatars IA

NVIDIA ACE permet la création d'avatars numériques photoréalistes grâce à sa technologie Audio2Face, qui génère des animations faciales en temps réel à partir d'entrées audio. La plateforme permet aux développeurs de créer des humains numériques avec des expressions réalistes, une synchronisation labiale et des réponses émotionnelles pour les jeux, les assistants virtuels et les applications de divertissement interactif.

Développement de jeux IA

NVIDIA ACE offre aux développeurs de jeux une suite de microservices IA pour intégrer la technologie de personnages intelligents dans les moteurs de jeu. La plateforme s'exécute sur du matériel NVIDIA RTX ou une infrastructure cloud, fournissant aux studios des outils prêts pour la production pour la reconnaissance vocale, la génération de dialogue, la synthèse vocale et l'animation faciale dans des jeux commerciaux.

Outils de PNJ IA

NVIDIA ACE fournit une pile technologique complète pour créer des PNJ intelligents avec compréhension du langage naturel, capacités vocales en temps réel et animation faciale. La plateforme permet aux personnages de jeu d'entendre la parole du joueur, de comprendre l'intention, de générer des réponses contextuelles et d'exprimer des émotions à travers des mouvements faciaux réalistes, établissant une nouvelle norme pour l'interactivité des PNJ.

Generateurs de voix IA

NVIDIA ACE inclut une technologie de synthèse vocale alimentée par Riva optimisée pour les voix des personnages de jeux, générant une parole naturelle en temps réel avec une inflexion émotionnelle et des qualités vocales appropriées au personnage. La synthèse vocale s'exécute efficacement sur les GPU NVIDIA, permettant une génération vocale réactive pour le dialogue de personnages interactifs.