NVIDIA dévoile de nouveaux plugins d’IA pour Unreal Engine 5 à Unreal Fest Seattle 2024
À l’occasion de l’événement Unreal Fest Seattle 2024, NVIDIA a présenté des plugins innovants pour NVIDIA ACE intégrés à Unreal Engine 5. Ces outils visent à faciliter la création et le déploiement de personnages MetaHuman équipés par l’IA sur les ordinateurs Windows, rendant la production de contenus numériques encore plus accessible et efficace.

Les nouvelles fonctionnalités des plugins
Parmi les nouveautés, le plugin 3D Audio2Face est désormais disponible pour Unreal Engine 5 ainsi qu’Autodesk Maya. Cet outil révolutionnaire permet de créer des animations faciales et du lip syncing grâce à l’IA. En analysant les sons d’une voix, il génère des animations correspondant à l’expression faciale du personnage, rendant les interactions plus naturelles et immersives.
Outre le plugin Audio2Face, NVIDIA propose également le plugin Nemotron-Mini 4B Instruct et le plugin Retrieval Augmented Generation (RAG) pour Unreal Engine 5. Ces outils sont conçus pour améliorer le dialogue des personnages interactifs et fournir des informations contextuelles, enrichissant ainsi les échanges au sein des jeux.
Une avancée technologique pour les développeurs
Autre annonce marquante, la technologie de streaming pixel d’Epic pour Unreal prend également en charge NVIDIA ACE. Ce développement permet aux créateurs de diffuser des personnages MetaHuman d’une grande fidélité via Web Real-Time Communication. Cette fonctionnalité est pensée pour faciliter l’intégration des humains numériques équipés par l’IA dans les jeux et les applications, tout en garantissant une latence réduite et une mémoire minimale sur les PC Windows.
Les développeurs intéressés auront l’opportunité de demander un accès anticipé pour télécharger le microservice de rendu Unreal Engine 5, qui inclut le microservice Animation Graph et supporte les systèmes d’exploitation Linux. Par ailleurs, le plugin Maya ACE est déjà disponible en téléchargement sur GitHub.



