Hari ini, kami meluncurkan generasi 4D, didukung oleh Model Cube Foundation kami. Kreator dapat membangun pengalaman yang memungkinkan pemain membuat objek 3D interaktif seperti mobil, pesawat, dan lainnya. Ini baru permulaan, lihat apa yang akan terjadi selanjutnya dengan kreasi bertenaga AI. 1/4
Di lab penelitian kami, kami membangun "mimpi waktu nyata" - kemampuan untuk menghasilkan dunia video yang dapat diputar sepenuhnya yang diminta dari teks atau gambar apa pun. Model dunia kondisikan aksi real-time kami (saat ini berjalan secara internal pada 16fps pada 832x480p) dilatih pada kombinasi data, termasuk data interaksi avatar/dunia Roblox 3D eksklusif. Model dunia berbeda dari mesin multipemain karena menyimpan status dan memori dalam video laten. Roblox adalah multipemain, dan kami secara aktif meneliti cara optimal untuk menyimpan status secara bersamaan untuk ribuan pemain, dan menjaga mereka tetap sinkron dengan lingkungan mereka. Model dunia kami memanfaatkan teknologi basis data yang menyimpan semua interaksi pengguna di Roblox dalam format vektor yang dapat digunakan untuk merender ulang video dan interaksi dari sudut kamera mana pun. Kami melihat beberapa kegunaan langsung untuk model dunia Roblox kami. Kami akan menggunakannya secara berdampingan perintah teks, gambar, dan video sebagai cara untuk meluncurkan generasi otomatis dunia imersif. Di Roblox Studio, seorang pembuat konten dapat berjalan-jalan dan menggunakan petunjuk untuk "melukis" dunia dan kemudian mengubahnya menjadi representasi 3D atau langsung ke Roblox asli sebagai cara bagi banyak orang untuk bermain secara bersamaan. Semua ini menjadi hidup saat kita mengeksplorasi gagasan "Dream Theater" - di mana satu pengguna bermimpi, sementara yang lain menonton dan meminta mereka. 2/4
Untuk mendukung dunia besar dan fidelitas tinggi, mesin kami menerapkan strategi LOD yang efisien dengan sistem transcoding cloud yang mengalirkan jerat dan tekstur, bahkan di perangkat seluler kelas bawah. Kami memperluas kerangka kerja ini ke AI upsampling dunia 3D dari perintah. Dalam video pratinjau di bawah ini, dengan satu permintaan pengguna, teknologi upsampling 3D kami memperbarui geometri dan tekstur untuk mengubah game Roblox klasik Crossroads menjadi dunia fantasi dengan detail organik yang kaya. 3/4
Kami memiliki 13 miliar jam interaksi pemain di platform setiap bulan. Data ini memungkinkan kita untuk melatih NPC cerdas yang dapat bernalar dan berinteraksi di dunia 3D. Pelatihan kami melampaui video gameplay dan tindakan WASD sederhana, memanfaatkan model data lengkap kami untuk representasi interaksi manusia yang lebih rinci. Video kami di bawah ini menunjukkan NPC Roblox mencari cara membuat api unggun dengan bernalar mundur untuk menemukan kapak, menebang pohon, dan membawa kayu ke lubang api. Ini masih penelitian awal tetapi kami membayangkan masa depan di mana NPC cerdas dapat bermain bersama pemain sungguhan. 4/4
107