il test di verifica per capire se un'idea di prodotto LLM è buona o meno è se un modello all'avanguardia può svolgere il 95%+ del compito attualmente e senza modifiche. Se la risposta è sì — codifica; trascrizione; pre-compilazione di moduli; rag + chat — allora è un buon momento.

a mio avviso, il peggior posto sono i prodotti in cui i modelli sono circa all'80% del loro potenziale. Per farli funzionare, devi gestire molti prompt, sovrapporre conoscenze specialistiche, ecc. — in altre parole, lavorare per posizionarti in modo da perdere se i modelli migliorano e perdere se non lo fanno.

forse puoi indovinare quanto sei lontano prendendo quanto sono buoni i modelli ora e dividendo il divario fino al 95+ per quanto sono migliorati nel compito nell'ultima generazione. per molti compiti all'80% è probabilmente come... 4-5 anni? più a lungo per gli agenti

in molti di questi settori sospetto che i prodotti consolidati saranno superati da nuovi entranti proprio per questo motivo: avranno investito capitali per risolvere problemi che i nuovi concorrenti risolveranno direttamente tramite l'API

inoltre avranno il vantaggio di aver visto aziende di successo in altri settori risolvere problemi di interfaccia e crescita (come abbiamo visto accadere nei social media e nel SaaS)

soprattutto vero perché sospetto che molti prodotti LLM siano già costretti dalla concorrenza delle grandi aziende ad adottare modelli di business dai quali è più facile disimpegnarsi, e quindi avranno poco lock-in quando emergeranno concorrenti migliori