Neste experimento, queria tentar algo com expressões faciais e fazê-lo funcionar com as ferramentas nativas do Unreal Engine. Descobri que gerar a cabeça com a boca aberta ajudou a obter alguns detalhes extras. Criar essas formas de mistura ainda não foi fácil e este resultado está longe de ser perfeito. Idealmente, quero 58 referências de expressões geradas e deixar a IA descobrir isso, haha. A propósito, é a primeira vez que estou a assar os detalhes de alta poligonalidade no personagem gerado de baixa poligonalidade. Isso funcionou surpreendentemente bem! O resultado final tem 34k triângulos! Construi este personagem em 4 partes separadas no Blender e gerei cada parte no Hunyuan 3D Studio. As referências originais vieram de Nano Banana 2 e Grok. Trellis 2 no ComfyUI para a texturização. A animação foi feita com Control Rig no UEFN / Unreal Engine. Com todos os experimentos até agora, a gestão de arquivos e versões começa a tornar-se um desafio. Obter arquivos de diferentes plataformas, cada uma com a sua própria lógica de nomes de arquivos. Vou ter que encontrar algo para manter tudo mais organizado. Alguma sugestão?

Isto é louco! Com o LTX 2 no ComfyUI consegui manter o meu movimento de câmara original + fez uma sincronização labial completa na canção haha. Tudo a correr localmente. Fiz o vídeo original em 2021 quando os Metahumans foram lançados pela primeira vez e estávamos a trabalhar no Unreal Engine 4. Este vídeo musical foi uma espécie de resultado das minhas primeiras experiências com Livelink e Control Rig naquela altura. Agora a nova versão melhorada pela IA não é perfeita e ainda não treinei nenhum lora para consistência de personagens. Também não tinha mais o arquivo de vídeo original, então baixei a versão do Youtube como entrada haha. No entanto, o resultado da câmara + as expressões faciais são realmente promissores! Pergunto-me como lidaria com tomadas mais complexas e rápidas.