La classifica globale dei modelli di grandi dimensioni, lmarena, ha registrato tutti i modelli che hanno raggiunto la vetta della classifica dei modelli dopo metà del 2023. A partire da GPT-4, i modelli rimangono in media al primo posto solo per circa 35 giorni. Non sei mesi, né un anno, ma poco più di un mese prima di essere superati da nuovi modelli. Ancora più sorprendente è che molti modelli, dopo aver raggiunto la vetta, cadono fuori dalla Top 5 dopo circa 5 mesi, e dopo 7 mesi è difficile persino mantenere la Top 10. Dare un'occhiata a esempi specifici è ancora più impattante: L'ex modello di grande successo o1, ora è al #56; Il modello considerato "il più potente per il ragionamento" dell'epoca, Claude 3 Opus, è già sceso al #139. Tutti loro erano: Prodotti di modelli di alto livello con un'alta discussione, considerati "un passo avanti". Nessuno può rimanere a lungo in cima, la finestra di vantaggio si sta riducendo a unità di "mesi". Quando i modelli possono essere superati in media in 35 giorni dalla generazione successiva, persino superando i cicli di iterazione di alcuni prodotti AI...😄 Questo potrebbe significare una cosa fondamentale: la velocità di miglioramento delle capacità fondamentali dei modelli è persino più rapida della maggior parte dei cicli di iterazione dei prodotti. E il livello del prodotto è invece "schiacciato all'indietro" dalle capacità del modello.