Hoje, estamos lançando a geração 4D, impulsionada pelo nosso Modelo de Fundação do Cubo. Os criadores podem criar experiências que permitem aos jogadores criar objetos 3D interativos, como carros, aviões e mais. Isso é só o começo, veja o que vem a seguir com a criação movida por IA. 1/4

No nosso laboratório de pesquisa, estamos construindo o "sonho em tempo real" – a capacidade de gerar mundos de vídeo totalmente reproduíveis a partir de qualquer texto ou imagem. Nosso modelo de mundo em tempo real, condicionado à ação (atualmente rodando internamente a 16fps em 832x480p) é treinado com uma combinação de dados, incluindo dados proprietários de interação avatar/mundo 3D do Roblox. Os modelos de mundos são diferentes dos motores multiplayer porque armazenam estado e memória em latentes de vídeo. Roblox é multiplayer, e estamos pesquisando ativamente maneiras ótimas de armazenar simultaneamente o estado de milhares de jogadores e mantê-los sincronizados com o ambiente. Nosso modelo mundial utiliza tecnologia de banco de dados, que armazena todas as interações do usuário no Roblox em um formato vetorial que pode ser usado para rerenderizar vídeo e interação de qualquer ângulo de câmera. Vemos vários usos imediatos para nosso modelo de mundo Roblox. Vamos usá-lo lado a lado com prompts de texto, imagem e vídeo como uma forma de lançar a geração automática de mundos imersivos. No Roblox Studio, um criador podia andar por aí e usar prompts para "pintar" um mundo e depois convertê-lo em uma representação 3D ou direto para o Roblox nativo como uma forma de muitas pessoas jogarem simultaneamente. Tudo isso ganha vida à medida que exploramos a noção de "Dream Theater" – onde um usuário está sonhando, enquanto outros assistem e o incentivam. 2/4

Para suportar mundos massivos e de alta fidelidade, nosso motor implementa uma estratégia eficiente de LOD com um sistema de transcodificação em nuvem que transmite malhas e texturas, mesmo em dispositivos móveis de menor porte. Estamos expandindo essa estrutura para a upsampling de mundos 3D por IA a partir de prompts. Neste vídeo de prévia abaixo, com um único prompt do usuário, nossa tecnologia de upsampling 3D atualiza a geometria e a textura para transformar o clássico jogo do Roblox, Crossroads, em um mundo de fantasia com detalhes orgânicos ricos. 3/4

Temos 13 bilhões de horas de interação com jogadores na plataforma por mês. Esses dados nos permitem treinar NPCs inteligentes que podem raciocinar e interagir em mundos 3D. Nosso treinamento vai além de vídeos de gameplay e ações simples do WASD, utilizando nosso modelo completo de dados para uma representação mais detalhada das interações humanas. Nosso vídeo abaixo mostra NPCs do Roblox descobrindo como fazer uma fogueira raciocínio para trás para encontrar um machado, cortar uma árvore e levar a madeira para a fogueira. Ainda é uma pesquisa inicial, mas imaginamos um futuro onde NPCs inteligentes poderiam jogar ao lado de jogadores reais. 4/4