Inilah bukti bahwa Claude Code dapat menulis seluruh makalah polisci empiris. Untuk memvalidasi klaim saya bahwa agen AI datang untuk polisci "seperti kereta barang", hari ini saya meminta Claude Code sepenuhnya mereplikasi dan memperluas makalah lama saya yang memperkirakan efek pemungutan suara universal melalui pos pada jumlah pemilih dan hasil pemilu... pada dasarnya dalam satu bidikan. Setelah diminta dengan cermat, Claude Code: (1) Mengunduh repositori makalah lama dan mereplikasi hasil sebelumnya, menerjemahkan Kode Stata lama kami ke dalam Python (2) Merayapi web untuk mendapatkan data pemilu resmi dan data sensus yang diperbarui (3) Menjalankan analisis baru yang memperpanjang hasil hingga 2024 (4) Membuat tabel dan gambar baru (5) Melakukan tinjauan menyala (6) Menulis makalah yang sama sekali baru (7) Mendorong semuanya ke repositori github baru Semuanya memakan waktu sekitar satu jam. Ini adalah pergeseran paradigma yang gila dalam bagaimana pekerjaan empiris dilakukan. Ini juga memvalidasi poin yang dibuat oleh beberapa orang termasuk @BrendanNyhan kemarin---akan sangat mudah untuk menskalakan penelitian observasional dengan AI. Terima kasih kepada @alexolegimas, @arthur_spirling, dan banyak lainnya yang memberi saya umpan balik. .
Andy Hall
Andy Hall3 Jan, 06.46
Claude Code dan sejenisnya datang untuk mempelajari politik seperti kereta barang. Seorang akademisi tunggal akan dapat menulis ribuan makalah empiris (terutama eksperimen survei atau eksperimen LLM) per tahun. Claude Code pada dasarnya sudah dapat melakukan satu kali kertas eksperimen survei gaya AJPS lengkap (dengan akses ke API Prolific). Kita perlu menemukan cara-cara baru untuk mengatur dan menyebarkan penelitian ilmu politik dalam waktu dekat untuk banjir ini.
Beberapa catatan untuk nanti: --Ini mungkin kasus yang paling mudah karena hanya melibatkan perluasan analisis sederhana dengan data publik. --Claude tidak dapat memperbarui beberapa perkiraan jumlah pemilih/mode kami yang mengandalkan data file pemilih milik (pada prinsipnya Claude dapat meminta dan mengakses data ini tetapi itu akan sangat rumit) --Upaya pertama Claude pada desain acara tidak benar --Saya memberi Claude instruksi tentang paket Python apa yang akan digunakan untuk sedekat mungkin dengan paket reghdfe Stata --Beberapa hal berikutnya untuk dicoba: ekstensi yang lebih kompleks yang membutuhkan lebih banyak pengumpulan data baru dan metode analisis yang lebih baru
Dan inilah reponya:
271