Fy faen... Hugging Face tilberedt igjen! 🔥 de har nettopp sluppet en gratis blogg (BOK) som dekker no-bs-virkeligheten ved å bygge SOTA-modeller. jeg har ikke sett noen lab/forsker gå inn på de virkelige beslutningene bak LLM-forskningen og dens nyanser. Dette er bokstavelig talt en perle. Pensum: → Treningskompass: hvorfor → hva → hvordan → Hver stor modell starter med en liten ablasjon → Utforme modellarkitekturen → Kunsten å kuratere data → Treningsmaraton → Beyond basismodeller – ettertrening i 2025 → Infrastruktur - den ukjente helten Når du skummer gjennom bloggen, er dette utrolig detaljert akkurat som deres Ultrascale playbook. Jeg kommer til å lese dette og dele mer om det i løpet av de kommende dagene. Les her: