Andrew Ng wydał „Agentic Reviewer” do recenzji prac badawczych. Właśnie osiągnął poziom zgody bliski ludzkiemu po treningu na prawdziwych recenzjach ICLR 2025. 𝗧𝗵𝗲 𝗽𝗿𝗼𝗯𝗹𝗲𝗺 𝗶𝘁 𝘁𝗮𝗿𝗴𝗲𝘁𝘀 Recenzowanie prac jest wolne. Każda cykl trwa około sześciu miesięcy. Jeden student otrzymał sześć odmów w ciągu trzech lat. Szybkość iteracji, a nie pomysły, stała się wąskim gardłem. 𝗛𝗼𝘄 𝗶𝘁 𝘄𝗼𝗿𝗸𝘀 System uczy się na podstawie prawdziwych opinii z konferencji. Czyta twoją pracę, a następnie przeszukuje arXiv w poszukiwaniu powiązanych prac. Przepływ jest prosty: Analizuj twierdzenia i strukturę Podstawiaj komentarze w opublikowanych badaniach Produkuj zorganizowaną opinię w stylu recenzenta Najlepiej działa w dziedzinach z otwartą literaturą. 𝗛𝗼𝘄 𝗴𝗼𝗼𝗱 𝗶𝘁 𝗶𝘀 Korelacja recenzji człowiek-człowiek wynosi 0.41. Korelacja AI-człowiek osiąga 0.42. To blisko zgody recenzentów dzisiaj.
Link:
62