Dziś uruchamiamy generację 4D, napędzaną przez nasz model Cube Foundation. Twórcy mogą budować doświadczenia, które pozwalają graczom tworzyć interaktywne obiekty 3D, takie jak samochody, samoloty i inne. To dopiero początek, zobacz, co dalej z tworzeniem napędzanym przez AI. 1/4

W naszym laboratorium badawczym budujemy „marzenia w czasie rzeczywistym” - zdolność do generowania w pełni grywalnych światów wideo na podstawie dowolnego tekstu lub obrazu. Nasz model świata w czasie rzeczywistym, warunkowany akcją (aktualnie działający wewnętrznie z prędkością 16 klatek na sekundę w rozdzielczości 832x480p), jest trenowany na połączeniu danych, w tym zastrzeżonych danych interakcji 3D awatarów/światów Roblox. Modele światów różnią się od silników wieloosobowych tym, że przechowują stan i pamięć w latentnych wideo. Roblox jest wieloosobowy, a my aktywnie badamy optymalne sposoby jednoczesnego przechowywania stanu dla tysięcy graczy i synchronizowania ich z otoczeniem. Nasz model świata wykorzystuje technologię baz danych, która przechowuje wszystkie interakcje użytkowników na Roblox w formacie wektorowym, który można wykorzystać do ponownego renderowania wideo i interakcji z dowolnego kąta kamery. Widzę kilka natychmiastowych zastosowań dla naszego modelu świata Roblox. Użyjemy go obok tekstów, obrazów i wideo jako sposobu na uruchomienie automatycznego generowania immersyjnych światów. W Roblox Studio twórca mógłby chodzić i używać podpowiedzi do „malowania” świata, a następnie przekształcić go w reprezentację 3D lub bezpośrednio do natywnego Roblox jako sposób, aby wiele osób mogło grać jednocześnie. To wszystko ożywa, gdy eksplorujemy pojęcie „Teatru Marzeń” - gdzie jeden użytkownik śni, podczas gdy inni go obserwują i podpowiadają.

Aby wspierać ogromne, wysokiej jakości światy, nasz silnik wdraża efektywną strategię LOD z systemem transkodowania w chmurze, który przesyła siatki i tekstury, nawet na urządzeniach mobilnych o niższej wydajności. Rozszerzamy tę strukturę o AI upsampling 3D światów na podstawie podpowiedzi. W tym filmie zaprezentowanym poniżej, przy użyciu pojedynczej podpowiedzi użytkownika, nasza technologia upsamplingu 3D aktualizuje geometrię i teksturę, aby przekształcić klasyczną grę Roblox Crossroads w fantastyczny świat z bogatymi organicznymi detalami. 3/4

Mamy 13 miliardów godzin interakcji graczy na platformie miesięcznie. Te dane pozwalają nam szkolić inteligentne NPC, które potrafią rozumować i wchodzić w interakcje w trójwymiarowych światach. Nasze szkolenie wykracza poza filmy z rozgrywki i proste akcje WASD, wykorzystując nasz pełny model danych do bardziej szczegółowej reprezentacji ludzkich interakcji. Nasze wideo poniżej pokazuje NPC z Roblox, które dowiadują się, jak zbudować ognisko, rozumując wstecz, aby znaleźć siekierę, ściąć drzewo i przynieść drewno do paleniska. To wciąż wczesne badania, ale wyobrażamy sobie przyszłość, w której inteligentne NPC mogłyby grać obok prawdziwych graczy. 4/4