LMARENA, daftar kompetisi model besar yang terkenal di dunia, menghitung semua model yang menduduki puncak daftar model besar sejak pertengahan 2023 Mulai dari GPT-4, model ini hanya dapat bertahan di posisi NO.1 rata-rata sekitar 35 hari. Tidak setengah tahun, bukan setahun, lebih dari sebulan akan dilampaui oleh model baru. Yang lebih dibesar-besarkan adalah bahwa banyak model keluar dari Top 5 sekitar 5 bulan setelah mencapai puncak, dan sulit untuk mempertahankan 10 Besar dalam 7 bulan. Melihat contoh spesifik akan lebih berdampak: O1, yang dulunya indah, sekarang berada di peringkat #56; Claude 3 Opus, yang dianggap sebagai "model penalaran terkuat" saat itu, telah jatuh ke #139 Mereka semua dulu: Model teratas sangat dibahas dan dianggap sebagai produk "generasi terkemuka" Tidak ada yang bisa berdiri di bagian atas daftar untuk waktu yang lama, dan jendela keuntungan sedang dikompresi ke satuan "bulan". Ketika model tersebut dapat dilampaui oleh generasi berikutnya dalam rata-rata 35 hari, bahkan melebihi siklus iterasi beberapa produk AI ... 😄 Ini bisa berarti hal kunci: kemampuan dasar model meningkat lebih cepat daripada siklus iterasi sebagian besar produk. Lapisan produk "diratakan terbalik" oleh kemampuan model.