🚨BREAKING: Tesla heeft een nieuw bestandsformaat genaamd .SMOL gecreëerd om de FSD-training met 4x te versnellen. Tesla-ingenieurs realiseerden zich dat de GPU's niet de bottleneck waren. Het opslagsysteem was dat wel. Oude formaten zoals MP4 en CSV dwongen het systeem om enorme bestanden te scannen, decoderen en doorzoeken om slechts een paar frames gegevens te vinden. Dat kostte tijd. Dure GPU's zaten inactief te wachten op gegevens om te laden. Dus bouwde Tesla een aangepast formaat vanaf nul. Het idee is eenvoudig maar krachtig: Plaats een masterindex aan de voorkant van het bestand die het systeem precies vertelt waar elk stuk gegevens zich bevindt. Geen scanning. Geen decodering. Geen zoeken. Het systeem springt direct naar de exacte byte die het nodig heeft en voedt de GPU onmiddellijk. Resultaat: • 400% minder I/O-bewerkingen • ~11% kleinere bestanden op petabyte-schaal • GPU's blijven volledig bezig in plaats van te wachten • FSD-modellen trainen veel sneller zonder nieuwe hardware Tesla slaat ook gegevens op in direct bruikbare tensorvorm, zodat de CPU geen tijd verspilt met het converteren van formaten voordat de GPU het kan gebruiken. Nog interessanter. Het patent zegt dat dit formaat niet alleen voor auto's is....