Hoje, estamos a lançar a geração 4D, impulsionada pelo nosso Modelo de Fundação Cube. Os criadores podem construir experiências que permitem aos jogadores criar objetos 3D interativos como carros, aviões e muito mais. Isto é apenas o começo, veja o que vem a seguir com a criação impulsionada por AI. 1/4

No nosso laboratório de pesquisa, estamos a construir "sonhos em tempo real" - a capacidade de gerar mundos de vídeo totalmente jogáveis a partir de qualquer texto ou imagem. O nosso modelo de mundo condicionado por ação em tempo real (atualmente a funcionar internamente a 16fps a 832x480p) é treinado com uma combinação de dados, incluindo dados proprietários de interação de avatares/mundos 3D do Roblox. Os modelos de mundo são diferentes dos motores multiplayer na medida em que armazenam estado e memória em latentes de vídeo. O Roblox é multiplayer, e estamos a investigar ativamente formas ótimas de armazenar simultaneamente o estado para milhares de jogadores e mantê-los sincronizados com o seu ambiente. O nosso modelo de mundo aproveita a tecnologia de base de dados que armazena todas as interações dos utilizadores no Roblox em um formato vetorial que pode ser usado para re-renderizar vídeo e interação de qualquer ângulo de câmera. Vemos várias utilizações imediatas para o nosso modelo de mundo do Roblox. Vamos usá-lo lado a lado com prompts de texto, imagem e vídeo como uma forma de lançar a auto-geração de mundos imersivos. No Roblox Studio, um criador poderia andar e usar prompts para "pintar" um mundo e depois convertê-lo em uma representação 3D ou direcioná-lo para o nativo do Roblox como uma forma de muitas pessoas jogarem simultaneamente. Tudo isso ganha vida enquanto exploramos a noção de um "Teatro dos Sonhos" - onde um utilizador está a sonhar, enquanto outros assistem e o incentivam. 2/4

Para suportar mundos massivos e de alta fidelidade, nosso motor implementa uma estratégia de LOD eficiente com um sistema de transcodificação em nuvem que transmite malhas e texturas, mesmo em dispositivos móveis de menor desempenho. Estamos expandindo essa estrutura para o upsampling de mundos 3D a partir de prompts de IA. No vídeo de pré-visualização abaixo, com um único prompt do usuário, nossa tecnologia de upsampling 3D atualiza a geometria e a textura para transformar o clássico jogo Roblox Crossroads em um mundo de fantasia com ricos detalhes orgânicos. 3/4

Temos 13B horas de interação de jogadores na plataforma mensalmente. Esses dados permitem-nos treinar NPCs inteligentes que podem raciocinar e interagir em mundos 3D. O nosso treinamento vai além de vídeos de jogabilidade e ações simples de WASD, utilizando o nosso modelo de dados completo para uma representação mais detalhada das interações humanas. O nosso vídeo abaixo mostra NPCs do Roblox descobrindo como construir uma fogueira, raciocinando para trás para encontrar um machado, derrubar uma árvore e trazer a madeira para o fogo. Esta ainda é uma pesquisa inicial, mas imaginamos um futuro onde NPCs inteligentes possam jogar ao lado de jogadores reais. 4/4