I dette eksperimentet ønsket jeg å prøve noe med ansiktsuttrykk og få det til å fungere med native Unreal Engine-verktøy. Jeg opplevde at det å lage hodet med åpen munn hjalp for å få noen ekstra detaljer. Å lage disse blend-formene var fortsatt ikke lett, og dette resultatet er langt fra perfekt. Ideelt sett vil jeg ha 58 genererte uttrykksreferanser og la AI finne ut av det, haha. Forresten, første gang jeg baker høypoly-detaljene på den lavpoly-genererte karakteren. Det fungerte overraskende bra! Sluttresultatet har 34 000 trekanter! Bygde denne karakteren i 4 separate deler i Blender og genererte hver del i Hunyuan 3D Studio. De opprinnelige referansene kom fra Nano Banana 2 og Grok. Trellis 2 i ComfyUI for tekstureringen. Animasjonen ble gjort med Control Rig i UEFN / Unreal Engine. Med alle eksperimentene så langt begynner fil- og versjonshåndtering å bli en utfordring. Å hente filer fra forskjellige plattformer, hvor hver plattform har sin egen filnavnslogikk. Jeg må finne noe som holder det mer organisert. Noen forslag?

Dette er galskap! Med LTX 2 i ComfyUI klarte jeg å beholde min opprinnelige kamerabevegelse + den gjorde full lip-sync på sangen haha. Alle kjører lokalt. Jeg lagde den originale videoen tilbake i 2021 da Metahumans først kom ut, og vi jobbet med Unreal Engine 4. Denne musikkvideoen var et slags resultat av mine første eksperimenter med Livelink og Control Rig på den tiden. Den nye AI-forbedrede versjonen er ikke perfekt, og jeg har ikke trent noen lora for karakterkonsistens ennå. Jeg hadde heller ikke den originale videofilen lenger, så jeg lastet ned Youtube-versjonen som input haha. Men kameraresultatet + ansiktsuttrykkene er veldig lovende! Jeg lurer på hvordan den ville håndtert mer komplekse og raske skudd.