Jika wawancara Karpathy ini tidak meletuskan gelembung ai, tidak ada yang akan. 10 kutipan brutal: 1. LLM belum berfungsi Mereka tidak memiliki kecerdasan yang cukup, mereka tidak cukup multimoda, mereka tidak dapat menggunakan komputer, dan mereka tidak ingat apa yang Anda katakan kepada mereka. Mereka kurang secara kognitif. Butuh waktu sekitar satu dekade untuk mengatasi semua itu. 2. Saat Anda mem-bootnya, mereka selalu mulai dari nol Mereka tidak memiliki fase distilasi, tidak ada proses seperti tidur di mana apa yang terjadi dianalisis dan ditulis kembali ke dalam beban. 3. Apa yang disimpan dalam bobotnya hanyalah ingatan kabur tentang internet Itu hanya blur terkompresi dari 15 triliun token yang diperas ke dalam beberapa miliar parameter. Jendela konteks mereka hanyalah memori kerja jangka pendek. 4. Mereka pandai meniru, buruk dalam keluar dari berbagai data Terlalu banyak ingatan, tidak cukup penalaran. Kita perlu menghilangkan pengetahuan yang dihafal dan menjaga inti kognitif: algoritma, keajaiban kecerdasan, pemecahan masalah, strategi. 5. Kita mungkin telah menciptakan kembali jaringan kortikal, pembelajaran pola dan umum, tetapi kita masih kehilangan sisa otak Tidak ada hippocampus untuk ingatan. Tidak ada amigdala untuk naluri. Tidak ada emosi atau motivasi. 6. Mereka menghafal dengan sempurna tetapi menggeneralisasi dengan buruk Jika Anda memberi mereka angka acak, mereka dapat melafalkannya kembali. Tidak ada manusia yang bisa melakukan itu. Itulah masalahnya: manusia lupa cukup untuk dipaksa menemukan pola. 7. Apa pun yang benar-benar baru, kode yang belum pernah ditulis sebelumnya, ide yang tidak memiliki templat; mereka tersandung...