Sieh dir das Runtime-MetaHuman-Lip-Sync-Demoprojekt in Aktion an: Es zeigt realistische Gesichtsanimationen in Echtzeit, angetrieben durch Streaming-Audio aus mehreren Quellen – Live-Mikrofon, Mikrofonwiedergabe, lokales und cloudbasiertes Text-to-Speech (ElevenLabs, mehrere Sprachen) sowie Audiodatei-Wiedergabe. Funktioniert mit jedem Streaming-Audioeingang, jeder Sprache, MetaHuman- und benutzerdefinierten Charakteren – vollständig plattformübergreifend. Probier es selbst aus oder hol dir das Quellprojekt (UE 5.6+).
https://dev.epicgames.com/community/learning/tutorials/JoJa/unreal-engine-fab-runtime-metahuman-lip-sync-demoprojekt-echtzeit-streaming-lip-sync-uber-mikrofon-tts-und-audiodateien