Audio2Face

Nvidia ouvre l'accès à son outil d'IA pour l'animation faciale 3D réaliste

Alors voilà, Nvidia fait un truc vraiment cool qui pourrait bien secouer le monde des avatars 3D. Ils rendent open source leur technologie Audio2Face, qui est en gros un magicien de l'IA qui transforme les mots parlés en animations faciales super réalistes. C'est pas génial, ça ?

Imaginez : au lieu d'animer minutieusement chaque petit tic et sourire, les développeurs peuvent maintenant utiliser Audio2Face pour laisser l'IA faire le gros du boulot. Elle analyse l'audio – les petites nuances et inflexions dans une voix – et traduit ça en expressions crédibles sur le visage d'un avatar 3D.

Ce qui est particulièrement intéressant, c'est que ce n'est pas juste pour les trucs pré-enregistrés. Nvidia dit qu'on peut l'utiliser pour les livestreams aussi. Imaginez les possibilités pour les influenceurs virtuels, les personnages de jeux vidéo réalistes, ou même juste pour rendre vos appels Zoom un peu plus engageants. Certains développeurs ont déjà commencé à jouer avec Audio2Face, comme les créateurs de "Chernobylite 2: Exclusion Zone" et "Alien: Rogue Incursion Evolved Edition".

Nvidia ne se contente pas de livrer le produit fini. Ils rendent aussi open source le framework d'entraînement, ce qui signifie que les développeurs peuvent mettre les mains dans le cambouis et personnaliser les modèles d'IA pour leurs besoins spécifiques. Vous voulez créer des avatars qui réagissent différemment à certaines émotions ? Maintenant, vous pouvez ajuster l'IA pour faire exactement ça. On dirait que ça ouvre une énorme porte à l'innovation. J'ai hâte de voir ce que les gens vont inventer !

Source: The Verge