Runtime MetaHuman Lip Sync
Documentation du plugin Runtime MetaHuman Lip Sync.
Téléchargements et liens
Projets de démonstration :
Deux projets de démonstration prêts à l'emploi sont disponibles - consultez la page dédiée Projets de démonstration pour tous les détails, les téléchargements et les guides pas à pas :
- Workflow complet de PNJ conversationnel IA - reconnaissance vocale + chatbot LLM + TTS + synchronisation labiale
- Démo de synchronisation labiale de base - entrée microphone, fichiers audio, TTS
Les deux démos sont multiplateformes (Windows, Mac, Linux, iOS, Android, Meta Quest) et sont livrées sous forme de builds packagés et de projets sources complets UE 5.6+.
Tutoriels vidéo
Démos en vedette
Tutoriels du modèle réaliste (haute qualité)
- Lip Sync haute qualité à partir d'un fichier/un tampon audio
- Lip Sync haute qualité avec contrôle de l'humeur et TTS local
- Lip Sync haute qualité avec ElevenLabs et OpenAI TTS
- Lip Sync haute qualité en direct depuis un microphone
- Lip Sync haute qualité pour les personnages ARKit
- Lip Sync haute qualité pour les personnages Character Creator (CC5)
- Lip Sync haute qualité depuis un serveur distant
Tutoriels sur les modèles standard
- Lip Sync standard en direct avec microphone
- Lip Sync standard avec synthèse vocale locale
- Lip Sync standard avec ElevenLabs et OpenAI TTS
Configuration générale
- Ajout d'un personnage MetaHuman personnalisé au projet de démonstration
- Vidéo tutorielle de configuration
- Clignement des yeux MetaHuman et suivi de caméra
- Combinaison avec les animations faciales et corporelles
Assistance
- Support de plugin et développement personnalisé : solutions@georgy.dev (solutions sur mesure pour les équipes et les organisations)
Vue d'ensemble
Runtime MetaHuman Lip Sync Documentation
Guide d'installation
Ce guide vous accompagne dans le processus de configuration de base de Runtime MetaHuman Lip Sync avec vos personnages MetaHuman.
Guide de traitement audio
Apprenez à configurer différentes méthodes d'entrée audio pour le lip sync, y compris le microphone, la TTS et les sources audio en streaming.
Configuration du plugin
Découvrez comment configurer les modèles de lip sync, les animation blueprints, les paramètres d'humeur, les options de performance et résoudre les problèmes courants de lip sync.
Aides d’animation des yeux
Utilitaires auxiliaires optionnels pour piloter l’orientation du regard des yeux de MetaHuman (gaze) et les clignements automatiques des yeux en parallèle de la synchronisation labiale.
Comment utiliser le plugin avec des personnages personnalisés
Ce guide vous explique comment configurer Runtime MetaHuman Lip Sync pour des personnages non-MetaHuman. Ce processus requiert une bonne connaissance des concepts d’animation et du rigging. Si vous avez besoin d’aide pour l’implémenter sur votre personnage spécifique, vous pouvez contacter le support professionnel à l’adresse solutions@georgy.dev.
Configuration spécifique à la plateforme
Ce guide couvre les exigences de configuration et les paramètres spécifiques à chaque plateforme pour le plugin Runtime MetaHuman Lip Sync.
Projets de démonstration
Projets de démonstration prêts à l'emploi présentant Runtime MetaHuman Lip Sync, incluant un flux de travail complet d'avatar conversationnel IA avec reconnaissance vocale, intégration LLM, TTS et synchronisation labiale.