Audio2Face open-source

Audio2Face de Nvidia est Désormais Open Source : Des Avatars 3D Réalistes pour Tous

IA

Alors, Nvidia vient de sortir une mise à jour assez importante : ils rendent open source leur outil Audio2Face. Qu'est-ce que cela signifie pour vous ? Eh bien, si vous êtes intéressé par les avatars 3D et les animations faciales réalistes, c'est définitivement quelque chose qui devrait vous enthousiasmer. Fondamentalement, Audio2Face utilise l'IA pour créer des animations faciales pour des personnages 3D basées uniquement sur l'entrée audio. Imaginez, le visage de votre avatar reflétant les émotions et les mouvements des lèvres de quelqu'un qui parle en temps réel – plutôt cool, non ?

Ce qui est vraiment intéressant, c'est que ce n'est pas seulement pour du contenu préfabriqué. Nvidia dit que vous pouvez également l'utiliser pour des diffusions en direct. Je peux déjà imaginer des applications assez intéressantes pour cela, en particulier dans le monde de la réalité virtuelle et les expériences de métavers.

Farm51, les créateurs de Chernobylite 2, et les développeurs qui travaillent sur Alien: Rogue Incursion Evolved Edition sont déjà en train de jouer avec. C'est un témoignage du potentiel que ces développeurs de jeux utilisent cela, n'est-ce pas ?

Maintenant, la meilleure partie. Puisque Nvidia rend le logiciel open source, vous pouvez l'ajuster à votre guise. Si vous voulez entraîner vos propres modèles, n'hésitez pas à le faire, le framework est disponible.

Source: The Verge