Tässä kokeilussa halusin kokeilla jotain kasvojen ilmeillä ja saada sen toimimaan natiivien Unreal Engine -työkalujen kanssa. Huomasin, että suu auki olevalla päällä kuvaaminen auttoi saamaan lisäyksityiskohtia. Näiden sekoitusmuotojen luominen ei ollut vieläkään helppoa, ja tämä tulos on kaukana täydellisestä. Ihanteellisesti haluaisin 58 generoitua ilmaisuviittausta ja antaa tekoälyn selvittää ne haha. Muuten, ensimmäinen kerta kun leipomme korkean polyn yksityiskohdat matalapolyisen hahmon päälle. Se toimi yllättävän hyvin! Lopputuloksella on 34 000 kolmiota! Rakensin tämän hahmon neljään eri osaan Blenderissä ja loin jokaisen osan Hunyuan 3D Studiossa. Alkuperäiset viittaukset tulivat Nano Banana 2:sta ja Grokista. Trellis 2 ComfyUI:ssa teksturointia varten. Animaatio tehtiin Control Rigillä UEFN:ssä / Unreal Enginessä. Kaikkien kokeilujen jälkeen tiedostojen ja versioiden hallinta alkaa muodostua haasteeksi. Tiedostojen hakeminen eri alustoilta, ja jokaisella alustalla on oma tiedostonimilogiikkansa. Minun täytyy löytää jotain, mikä pitää homman järjestyksessä. Onko ehdotuksia?

Tämä on hullua! LTX 2:lla ComfyUI:ssa pystyin säilyttämään alkuperäisen kameran liikkeen + se teki täyden lip-syncin laulussa haha. Kaikki toimivat paikallisesti. Tein alkuperäisen videon vuonna 2021, kun Metahumans julkaistiin ensimmäisen kerran ja työskentelimme Unreal Engine 4:n parissa. Tämä musiikkivideo oli jonkinlainen tulos ensimmäisistä kokeiluistani Livelinkin ja Control Rigin kanssa tuolloin. Uusi tekoälyparanneltu versio ei ole täydellinen, enkä ole vielä kouluttanut mitään loraa hahmon johdonmukaisuuden vuoksi. Minulla ei myöskään ollut enää alkuperäistä videotiedostoa, joten latasin Youtube-version syötteeksi haha. Kuitenkin kameran tulos + ilmeet ovat todella lupaavia! Mietin kuitenkin, miten se käsittelisi monimutkaisempia ja nopeampia laukauksia.