templar właśnie wytrenował model o 72 miliardach parametrów w sieci internetowej z 70+ uczestnikami. to największy w pełni otwarty, zdecentralizowany wysiłek wstępnego szkolenia w historii. ich rzadki optymalizator loco skompresował dane 146x, umożliwiając połączeniom domowym udział w procesie. prawdziwym przełomem dla @tplr_ai jest zmuszenie nieznajomych do trenowania modelu bez oszustw, dzięki ich systemowi walidacji gauntlet. ale nadal potrzebowano 8x b200 gpus (~250 tys. dolarów), aby wziąć udział. to był dowód koncepcji dla dobrze skapitalizowanych operatorów... na razie. decentralizowane szkolenie może pewnego dnia zbliżyć się do modeli granicznych, ale tylko jeśli bariera sprzętowa znacznie się obniży.