Oggi lanciamo la generazione 4D, alimentata dal nostro Modello Fondazione Cube. I creatori possono costruire esperienze che consentono ai giocatori di creare oggetti 3D interattivi come auto, aerei e altro ancora. Questo è solo l'inizio, scopri cosa c'è dopo con la creazione alimentata da AI. 1/4

Nel nostro laboratorio di ricerca, stiamo costruendo il "sogno in tempo reale" - la capacità di generare mondi video completamente giocabili a partire da qualsiasi testo o immagine. Il nostro modello di mondo condizionato all'azione in tempo reale (attualmente in esecuzione internamente a 16fps a 832x480p) è addestrato su una combinazione di dati, inclusi dati proprietari di interazione con avatar/mondo 3D di Roblox. I modelli di mondo sono diversi dai motori multiplayer in quanto memorizzano stato e memoria nei latenti video. Roblox è multiplayer e stiamo attivamente ricercando modi ottimali per memorizzare simultaneamente lo stato per migliaia di giocatori e mantenerli sincronizzati con il loro ambiente. Il nostro modello di mondo sfrutta la tecnologia dei database che memorizza tutte le interazioni degli utenti su Roblox in un formato vettoriale che può essere utilizzato per ri-renderizzare video e interazioni da qualsiasi angolazione della telecamera. Vediamo diversi usi immediati per il nostro modello di mondo Roblox. Lo utilizzeremo affiancato a testi, immagini e video come modo per avviare l'auto-generazione di mondi immersivi. In Roblox Studio, un creatore potrebbe camminare e utilizzare prompt per "dipingere" un mondo e poi convertirlo in una rappresentazione 3D o direttamente in Roblox nativo come modo per permettere a molte persone di giocare simultaneamente. Tutto questo prende vita mentre esploriamo la nozione di un "Teatro dei Sogni" - dove un utente sta sognando, mentre altri lo guardano e lo stimolano.

Per supportare mondi massivi e ad alta fedeltà, il nostro motore implementa una strategia LOD efficiente con un sistema di transcoding cloud che trasmette mesh e texture, anche su dispositivi mobili di fascia bassa. Stiamo espandendo questo framework per l'upsampling AI di mondi 3D a partire da prompt. Nel video di anteprima qui sotto, con un singolo prompt dell'utente, la nostra tecnologia di upsampling 3D aggiorna la geometria e la texture per trasformare il classico gioco Roblox Crossroads in un mondo fantastico con ricchi dettagli organici. 3/4

Abbiamo 13 miliardi di ore di interazione dei giocatori sulla piattaforma ogni mese. Questi dati ci permettono di addestrare NPC intelligenti che possono ragionare e interagire in mondi 3D. Il nostro addestramento va oltre i video di gameplay e le semplici azioni WASD, utilizzando il nostro modello di dati completo per una rappresentazione più dettagliata delle interazioni umane. Il nostro video qui sotto mostra NPC di Roblox che scoprono come costruire un falò ragionando all'indietro per trovare un'ascia, abbattere un albero e portare la legna al focolare. Questa è ancora una ricerca preliminare, ma immaginiamo un futuro in cui NPC intelligenti potrebbero giocare insieme a veri giocatori. 4/4