Runtime MetaHuman Lip Sync
Dokumentation für das Runtime MetaHuman Lip Sync Plugin.
Downloads und Links
Demo-Projekte:
Zwei sofort einsatzbereite Demo-Projekte sind verfügbar – siehe die entsprechende Seite Demo-Projekte für vollständige Details, Downloads und Anleitungen:
- Vollständiger KI-Konversations-NPC-Workflow – Spracherkennung + LLM-Chatbot + TTS + Lippensynchronisation
- Einfache Lippensynchronisation-Demo – Mikrofoneingabe, Audiodateien, TTS
Beide Demos sind plattformübergreifend (Windows, Mac, Linux, iOS, Android, Meta Quest) und werden als verpackte Builds und vollständige UE 5.6+ Quellprojekte bereitgestellt.
Video-Tutorials
Vorgestellte Demos
Tutorials für realistisches Modell (Hohe Qualität)
- Hochwertige Lippensynchronisation aus Audiodatei/-puffer
- Hochwertige Lippensynchronisation mit Stimmungskontrolle & lokaler TTS
- Hochwertige Lippensynchronisation mit ElevenLabs & OpenAI TTS
- Hochwertige Live-Mikrofon-Lippensynchronisation
Tutorials für Standardmodell
- Standard-Live-Mikrofon-Lippensynchronisation
- Standard-Lippensynchronisation mit lokaler Text-to-Speech
- Standard-Lippensynchronisation mit ElevenLabs & OpenAI TTS
Allgemeine Einrichtung
- Hinzufügen eines benutzerdefinierten MetaHuman-Charakters zum Demo-Projekt
- Einrichtungs-Tutorial-Video
- Demo-Projekt-Walkthrough (älter)
Unterstützung
- Plugin-Unterstützung & kundenspezifische Entwicklung: solutions@georgy.dev (maßgeschneiderte Lösungen für Teams & Organisationen)
Überblick
Runtime MetaHuman Lip Sync Documentation
Einrichtungsanleitung
Diese Anleitung führt Sie durch den grundlegenden Einrichtungsprozess für Runtime MetaHuman Lip Sync mit Ihren MetaHuman-Charakteren.
Audio-Verarbeitungsleitfaden
Erfahren Sie, wie Sie verschiedene Audioeingabemethoden für Lippen-Sync einrichten, einschließlich Mikrofon, TTS und Streaming-Audioquellen.
Plugin-Konfiguration
Erfahren Sie, wie Sie Lippen-Synchronisations-Modelle konfigurieren, Animations-Blueprints einrichten, Stimmungseinstellungen vornehmen, Leistungsoptionen anpassen und häufige Probleme bei der Lippen-Synchronisation beheben.
So verwenden Sie das Plugin mit benutzerdefinierten Charakteren
Diese Anleitung führt Sie durch den Prozess der Einrichtung von Runtime MetaHuman Lip Sync für Nicht-MetaHuman-Charaktere. Dieser Prozess erfordert Vertrautheit mit Animationskonzepten und Rigging. Wenn Sie Unterstützung bei der Implementierung für Ihren spezifischen Charakter benötigen, können Sie unter solutions@georgy.dev professionelle Unterstützung anfordern.
Plattformspezifische Konfiguration
Diese Anleitung behandelt plattformspezifische Einrichtungsanforderungen und Konfigurationen für das Runtime MetaHuman Lip Sync Plugin.
Demo-Projekte
Einsatzbereite Demo-Projekte, die Runtime MetaHuman Lip Sync präsentieren, einschließlich eines vollständigen KI-gestützten NPC-Konversationsworkflows mit Spracherkennung, LLM-Integration, TTS und Lippensynchronisation.