Dalam eksperimen ini saya ingin mencoba sesuatu dengan ekspresi wajah dan membuatnya bekerja dengan alat Unreal Engine asli. Saya menemukan bahwa membuat kepala dengan mulut terbuka membantu mendapatkan beberapa detail tambahan. Menciptakan bentuk campuran itu masih tidak mudah dan hasil ini jauh dari sempurna. Idealnya saya ingin 58 referensi ekspresi yang dihasilkan dan meminta AI mengetahuinya haha. btw pertama kali memanggang detail poli tinggi ke karakter yang dihasilkan poli rendah. Itu bekerja dengan sangat baik! Hasil akhir memiliki 34k segitiga! Membangun karakter ini dalam 4 bagian terpisah di Blender dan menghasilkan setiap bagian di Hunyuan 3D Studio. Referensi aslinya berasal dari Nano Banana 2 dan Grok. Trellis 2 di ComfyUI untuk tekstur. Animasi dilakukan dengan Control Rig di UEFN / Unreal Engine. Dengan semua eksperimen sejauh ini, manajemen file dan versi mulai menjadi tantangan. Mendapatkan file dari platform yang berbeda dengan setiap platform memiliki logika nama filenya sendiri. Saya harus menemukan sesuatu untuk membuatnya lebih teratur. Ada saran?

Ini gila! Dengan LTX 2 di ComfyUI saya dapat mempertahankan gerakan kamera asli saya + itu melakukan sinkronisasi bibir penuh pada nyanyian haha. Semua berjalan secara lokal. Saya membuat video aslinya pada tahun 2021 ketika Metahumans pertama kali keluar dan kami bekerja di Unreal Engine 4. Video musik ini adalah semacam hasil dari eksperimen pertama saya dengan Livelink dan Control Rig pada saat itu. Sekarang versi AI baru yang ditingkatkan tidak sempurna dan saya belum melatih lora untuk konsistensi karakter. Saya juga tidak memiliki file video aslinya lagi jadi saya mengunduh versi Youtube sebagai input haha. Namun, hasil kamera + ekspresi wajah benar-benar menjanjikan! Saya bertanya-tanya bagaimana itu akan menangani bidikan yang lebih kompleks dan cepat.