Mitt motsatte syn er at «modellene er varer, bare bytte»-oppfatningen er et ekstremt naivt syn som nesten utelukkende holdes av folk her som aldri faktisk har levert LLM-baserte produkter i noen dybde. Disse personene er vanligvis bare pontifikatorer. Min personlige oppfatning er at vollgraven faktisk eksisterer, og det er den oppsamlede passformen... Som er ting som prompt-biblioteker, håndtering av edge case, institusjonell intuisjon om feilmoduser, og kalibrering av innebygd tillit. Og byttekostnader øker ikke-lineært med integrasjonsdybde. Overfladisk API-forbruker er kanskje trivielt. Men for dypt integrerte ting som målrettingslogikk, kommunikasjonspipelines, klassifiserte arbeidsflyter osv., er byttekostnaden i praksis en full omstruktureringssyklus forkledd som en leverandørbeslutning. Dow/antropiske situasjonen er spesielt interessant fordi militære organisasjoner sannsynligvis har den mest ekstreme versjonen av dette problemet. De kan ikke bare yolo-teste på produksjon, og alle atferdsmessige kanttilfeller må valideres på måter som er trege, dyre og krever spesialisert ekspertise som ikke nødvendigvis overføres mellom modellfamilier. Jeg er godt klar over dette fordi oppstarten vår har mulighet til å bytte til hvilken som helst modell, men det er et helvete fordi alt enten går i stykker eller blir veldig merkelig.