Runtime MetaHuman Lip Sync
Documentación del plugin Runtime MetaHuman Lip Sync.
Descargas y enlaces
Proyectos de demostración:
Hay dos proyectos de demostración listos para usar disponibles; consulta la página dedicada Proyectos de demostración para obtener todos los detalles, descargas y tutoriales:
- Flujo de trabajo completo de NPC conversacional con IA - reconocimiento de voz + chatbot LLM + TTS + lip sync
- Demo básica de lip sync - entrada de micrófono, archivos de audio, TTS
Ambas demos son multiplataforma (Windows, Mac, Linux, iOS, Android, Meta Quest) y se distribuyen como compilaciones empaquetadas y proyectos fuente completos de UE 5.6+.
Tutoriales en vídeo
Demos destacadas
Tutoriales del modelo realista (alta calidad)
- Sincronización labial de alta calidad desde archivo/búfer de audio
- Sincronización labial de alta calidad con control de estado de ánimo y TTS local
- Sincronización labial de alta calidad con ElevenLabs y OpenAI TTS
- Sincronización labial de alta calidad en vivo con micrófono
- Sincronización labial de alta calidad para personajes ARKit
- Sincronización labial de alta calidad para personajes de Character Creator (CC5)
- Sincronización labial de alta calidad desde un servidor remoto
Tutoriales del modelo estándar
- Sincronización labial estándar con micrófono en vivo
- Sincronización labial estándar con conversión de texto a voz local
- Sincronización labial estándar con ElevenLabs y OpenAI TTS
Configuración general
- Agregar un personaje MetaHuman personalizado al proyecto de demostración
- Video tutorial de configuración
- Parpadeo de ojos y seguimiento de cámara de MetaHuman
- Combinación con animaciones faciales y corporales
Soporte
- Soporte de plugins y desarrollo personalizado: solutions@georgy.dev (soluciones a medida para equipos y organizaciones)
Descripción general
Runtime MetaHuman Lip Sync Documentation
Guía de configuración
Esta guía te explica el proceso de configuración básica de Runtime MetaHuman Lip Sync con tus personajes MetaHuman.
Guía de Procesamiento de Audio
Aprende a configurar diferentes métodos de entrada de audio para la sincronización de labios, incluyendo micrófono, TTS y fuentes de audio en streaming.
Configuración del plugin
Aprende a configurar modelos de lip sync, animation blueprints, ajustes de estado de ánimo, opciones de rendimiento y a solucionar problemas comunes de lip sync.
Ayudantes de Animación de Ojos
Utilidades auxiliares opcionales para controlar la dirección de la mirada (gaze) de los ojos de MetaHuman y los parpadeos automáticos junto con la sincronización de labios.
Cómo usar el plugin con personajes personalizados
Esta guía te explica el proceso de configuración de Runtime MetaHuman Lip Sync para personajes no MetaHuman. Este proceso requiere familiaridad con conceptos de animación y rigging. Si necesitas asistencia para implementarlo en tu personaje específico, puedes contactar con soporte profesional en solutions@georgy.dev.
Configuración específica de la plataforma
Esta guía cubre los requisitos de configuración y las configuraciones específicas de cada plataforma para el plugin Runtime MetaHuman Lip Sync.
Proyectos de demostración
Proyectos demo listos para usar que muestran Runtime MetaHuman Lip Sync, incluyendo un flujo de trabajo completo de avatar conversacional con IA que incluye reconocimiento de voz, integración con LLM, TTS y sincronización de labios.