ImageNetissä oli jotain syvästi tyydyttävää. Siinä oli hyvin kuratoitu koulutussarja. Selkeästi määritelty testausprotokolla. Kilpailu, joka kokosi yhteen parhaat tutkijat. Ja tulostaulukko, joka synnytti ResNetit ja ViT:t ja muutti lopulta kentän lopullisesti. Sitten NLP seurasi. Riippumatta siitä, kuinka paljon OpenAI, Anthropic ja xAI ovat eri mieltä, ne ovat ainakin yhtä mieltä yhdestä asiasta: benchmarkingista. MMLU, HLE, SWEBench - et voi edistyä ennen kuin pystyt mittaamaan sitä. Robotiikalla ei vieläkään ole tällaista kokoontumista. Kukaan ei ole samaa mieltä mistään: laitteistosta, tehtävästä, pisteytyksestä, simulaatiomoottorista tai todellisesta ympäristöstä. Jokainen on määritelmän mukaan SOTA, joka on vertailuarvo, jonka he määrittelevät lennossa kullekin paperille. ImageNetin tekijältä - BEHAVIOR tarttuu pelottavaan haasteeseen yhdistää robotiikan vertailuanalyysi toistettavaan fysiikkamoottoriin (Isaac Sim). Projekti alkoi ennen kuin valmistuin Stanford Vision Labista, ja sen rakentaminen vaati niin monta vuotta omistautumista ja tohtorinuraa. Toivon, että KÄYTTÄYTYMINEN on joko tarvitsemamme mäkikiipeilysignaali tai kipinä, joka saa meidät vihdoin puhumaan siitä, kuinka mitata todellista edistystä alana.

Vibe Minecraft: moninpeli, itseään yhtenäinen, reaaliaikainen maailmanmalli, jonka avulla voit rakentaa mitä tahansa ja loihtia mitä tahansa esineitä. Työkalujen toiminta ja jopa itse pelimekaniikka voidaan ohjelmoida luonnollisella kielellä, kuten "krono-hakku: palauta mikä tahansa lohko aiempaan tilaan ajassa" ja "vesiputoukset muuttuvat sateenkaarisillaksi, kun yksisarviset kulkevat ohi". Pelaajat määrittelevät ja manipuloivat jaettua maailmaa kollektiivisesti. Neuraalinen sim ottaa syötteeksi *multimodaalisen* järjestelmäkehotteen: pelisäännöt, omaisuuden png-tiedostot, globaalin kartan ja pääsiäismunia. Se tallentaa ajoittain pelitilat piilevien vektorien sarjana, jotka voidaan ladata takaisin kontekstiin, valinnaisesti lomitettujen "ohjetekstien" avulla helpon muokkauksen mahdollistamiseksi. Jokaisella pelaajalla on oma eksplisiittinen tilasto-json (terveys, varasto, 3D-koordinaatti) sekä implisiittiset "pelaajavektorit", jotka tallentavat korkeamman asteen vuorovaikutushistorian. Pelin ylläpitäjät voivat luoda Minecraft-multiversumin, koska piilevät ovat yhteensopivia eri palvelimilta. Jokainen maailma voi risteytyä saumattomasti toisen kanssa ja synnyttää uusia maailmoja sekunneissa. Ihmiset voivat sekoittaa ystäviensä tai omien menneisyyden tilojensa kanssa. "Harvinaisia vektoreita" voi ilmaantua, kun jotkut pelaajat väistämättä vaeltavat maailmanmallin omituiseen, kartoittamattomaan piilevään avaruuteen. Näillä kelluvilla matriiseilla voidaan käydä kauppaa NFT:nä. Mitä villimpiä asioita kokeilet, sitä todennäköisemmin louhit harvinaisia vektoreita. Se, joka toimittaa Vibe Minecraftin ensin, jää historiaan muuttaessaan pelaamisen kulkua ikuisesti.

Haluaisin nähdä FSD:n skaalauslain, koska se on ainoa fyysisen datan vauhtipyörä planeetan mittakaavassa. Mikä on mallin/datan koon "emergentin kyvyn kynnys"?