Runtime MetaHuman Lip Sync
Documentação do plugin Runtime MetaHuman Lip Sync.
Downloads e Links
Projetos de Demonstração:
Dois projetos de demonstração prontos para uso estão disponíveis - consulte a página dedicada Projetos de Demonstração para obter detalhes completos, downloads e tutoriais passo a passo:
- Fluxo de Trabalho Completo de NPC Conversacional com IA - reconhecimento de fala + chatbot LLM + TTS + sincronização labial
- Demonstração Básica de Sincronização Labial - entrada de microfone, arquivos de áudio, TTS
Ambas as demos são multiplataforma (Windows, Mac, Linux, iOS, Android, Meta Quest) e são fornecidas como builds empacotados e projetos-fonte completos em UE 5.6+.
Tutoriais em Vídeo
Demonstrações em Destaque
Tutoriais de Modelo Realista (Alta Qualidade)
- Sincronização Labial de Alta Qualidade a partir de Arquivo/Buffer de Áudio
- Sincronização Labial de Alta Qualidade com Controle de Humor e TTS Local
- Sincronização Labial de Alta Qualidade com ElevenLabs e TTS da OpenAI
- Sincronização Labial de Alta Qualidade ao Vivo com Microfone
- Sincronização Labial de Alta Qualidade para Personagens ARKit
Tutoriais do Modelo Padrão
- Sincronização Labial Padrão com Microfone ao Vivo
- Sincronização Labial Padrão com Texto-para-Fala Local
- Sincronização Labial Padrão com ElevenLabs e TTS da OpenAI
Configuração Geral
- Adicionando um Personagem MetaHuman Personalizado ao Projeto de Demonstração
- Vídeo tutorial de configuração
- Piscar de Olhos do MetaHuman e Rastreamento de Câmera
- Combinando com Animações Faciais e Corporais
Suporte
- Suporte a Plugins e Desenvolvimento Personalizado: solutions@georgy.dev (soluções personalizadas para equipes e organizações)
Visão geral
Runtime MetaHuman Lip Sync Documentation
Guia de Configuração
Este guia orienta você pelo processo de configuração básica do Runtime MetaHuman Lip Sync com seus personagens MetaHuman.
Guia de Processamento de Áudio
Aprenda a configurar diferentes métodos de entrada de áudio para sincronização labial, incluindo microfone, TTS e fontes de áudio em streaming.
Configuração do Plugin
Aprenda a configurar modelos de lip sync, animation blueprints, configurações de humor, opções de desempenho e solucionar problemas comuns de lip sync.
Ajudantes de Animação Ocular
Utilitários auxiliares opcionais para controlar o direcionamento do olhar (gaze) dos MetaHuman e piscadas automáticas dos olhos em conjunto com a sincronização labial.
Como usar o plugin com personagens personalizados
Este guia orienta você pelo processo de configuração do Runtime MetaHuman Lip Sync para personagens não-MetaHuman. Este processo exige familiaridade com conceitos de animação e rigging. Se precisar de assistência para implementar isso no seu personagem específico, você pode entrar em contato para suporte profissional em solutions@georgy.dev.
Configuração Específica da Plataforma
Este guia aborda os requisitos de configuração específicos da plataforma e as configurações para o plugin Runtime MetaHuman Lip Sync.
Projetos de Demonstração
Projetos de demonstração prontos para uso que mostram o Runtime MetaHuman Lip Sync, incluindo um fluxo de trabalho completo de avatar conversacional com IA, com reconhecimento de fala, integração com LLM, TTS e sincronização labial.