Miluji, jak když jsem označil GPT5 za konec cesty a důkaz, že škálování už nefunguje, dostal jsem na tuto aplikaci spoustu nenávisti. Můžete se vrátit a najít tweety, které stále zůstaly. Bylo tehdy jasné, že větší škálování ve skutečnosti nepovede k znatelnému zlepšení. Řekl jsem, a měl jsem pravdu, že z pohledu teorie her, pokud nejste ve vědeckém závodě o škálování tréninku, musíte svou infrastrukturu vlivu výrazně zefektivnit. Tohle se doslova stalo s GPT5 a 5.1. Dokonce zrušili možnost vybrat si kvalitu modelu, který chcete v 5.1, nyní otevřená AI rozhoduje, kolik výpočetní práce si zasloužíte. Teď vidíte, jak Google, který byl vždy velmi citlivý na náklady na servisní modely, protože to je opravdu jejich byznys a jejich výhoda na trhu, konkuruje otevřené AI. Až Ilya přišel a řekl ti, co všichni věděli celý rok. Škálování tak, jak jsme to dělali dřív, je mrtvé. Poptávka po veškerém hardwaru potřebném pro školení bude klesat. Ale pokud jste mě sledovali pozorně, věděli jste, že zvoním na zvonek ještě před vydáním GPT5. Jsme v cyklu komodifikace, teď už nemůžete účtovat 70% marže, nemůžete si vsadit na softwarový příkop. Jde o to mít dostupnost a udržet kvalitu, když jste obchodník s komoditami jako Glencore & Trafigura. Investujte do výrobců paměti, doručovatelů disků, flash boyů, optiky, elektřiny. Násobení matic už není nic zvláštního.