de lakmoesproef voor de vraag of een LLM-productidee goed is of niet, is of een frontier-model nu direct 95%+ van de taak kan uitvoeren. als het antwoord ja is — coderen; notuleren; formulier vooraf invullen; rag + chat — dan is nu een goed moment.

in mijn visie is de slechtste plek producten waar de modellen ongeveer 80% van de weg zijn. Om het te laten werken, moet je een hoop promptbeheer doen, specialistische kennis overlayen, enz. — met andere woorden, je moet jezelf in een positie brengen om te verliezen als de modellen verbeteren en te verliezen als ze dat niet doen.

misschien kun je raden hoe ver je nog weg bent door te kijken hoe goed de modellen nu zijn en de kloof naar 95+ te delen door hoeveel ze zijn verbeterd in de meest recente generatie. voor veel 80% taken is dat waarschijnlijk zo'n... 4-5 jaar? langer voor agents

in veel van deze sectoren vermoed ik dat gevestigde producten zullen worden verslagen door nieuwe toetreders om precies deze reden - ze zullen kapitaal hebben geïnvesteerd in het oplossen van problemen die nieuwe concurrenten rechtstreeks vanuit de API zullen oplossen

bovendien zullen ze profiteren van het feit dat ze succesvolle bedrijven in andere sectoren hebben gezien die interface- en groeiproblemen oplossen (zoals we hebben gezien in sociale media en SaaS)

vooral waar omdat ik vermoed dat veel LLM-producten al onder druk staan van de concurrentie van grote bedrijven om bedrijfsmodellen aan te nemen die gemakkelijker te verlaten zijn, en dus weinig lock-in zullen hebben wanneer betere concurrenten opkomen.