🚨СРОЧНО: Tesla создала новый формат файлов под названием .SMOL, чтобы ускорить обучение FSD в 4 раза Инженеры Tesla поняли, что узким местом являются не GPU. А система хранения данных. Старые форматы, такие как MP4 и CSV, заставляли систему сканировать, декодировать и искать в огромных файлах, чтобы найти всего несколько кадров данных. Это трата времени. Дорогие GPU простаивали в ожидании загрузки данных. Поэтому Tesla создала собственный формат с нуля. Идея проста, но мощна: Поместите главный индекс в самом начале файла, который точно указывает системе, где находится каждый кусочек данных. Без сканирования. Без декодирования. Без поиска. Система сразу переходит к нужному байту и мгновенно подает его на GPU. Результат: • На 400% меньше операций ввода-вывода • ~11% меньшие файлы на уровне петабайта • GPU всегда заняты, а не ждут • Модели FSD обучаются гораздо быстрее без нового оборудования Tesla также хранит данные в готовом к использованию тензорном формате, чтобы CPU не тратил время на преобразование форматов перед использованием GPU. Еще более интересно. Патент говорит, что этот формат предназначен не только для автомобилей....