Audio2face

Audio2face ist eine KI-gestützte Anwendung, die Audioeingaben in synchronisierte Gesichtsanimationen für digitale 3D-Figuren umwandelt. Ein vortrainiertes neuronales Netz erzeugt realistische Mundbewegungen, Gesichtsausdrücke und Kopfbewegungen, die unabhängig von der Sprache zur Tonspur passen.

Highlights

• Erzeugt Animationen in Echtzeit aus Audio und bietet eine einstellbare Ausdrucksstärke
• Unterstützt jede Sprache und jeden Akzent ohne erneutes Training
• Überträgt Animationen auf unterschiedliche 3D-Charaktermodelle
• Lässt sich in 3D-Workflows für Spiele, Filme und interaktive Anwendungen integrieren
• Werkzeuge zur Nachbearbeitung ermöglichen die Feinabstimmung der Darstellung

Audio2face eignet sich für Content-Ersteller, Animatoren und Entwickler, die Charakteranimationen schnell und ohne manuelles Setzen von Keyframes produzieren müssen. Das Tool ist als Teil der NVIDIA Omniverse Suite kostenlos und arbeitet mit gängigen 3D-Meshes, sodass es sich in unterschiedliche Produktionsabläufe einfügt.