Эндрю Нг выпустил «Агентного рецензента» для научных статей. Он только что достиг уровня согласия, близкого к человеческому, после обучения на реальных отзывах ICLR 2025. 𝗧𝗵𝗲 𝗽𝗿𝗼𝗯𝗹𝗲𝗺 𝗶𝘁 𝘁𝗮𝗿𝗴𝗲𝘁𝘀 Рецензирование статей идет медленно. Каждый цикл занимает около шести месяцев. Один студент получил шесть отказов за три года. Скорость итерации, а не идеи, стала узким местом. 𝗛𝗼𝘄 𝗶𝘁 𝘄𝗼𝗿𝗸𝘀 Система учится на реальных отзывах конференций. Она читает вашу статью, а затем ищет в arXiv связанные работы. Процесс прост: Анализировать утверждения и структуру Основывать комментарии на опубликованных исследованиях Создавать структурированные отзывы в стиле рецензента Она работает лучше в областях с открытой литературой. 𝗛𝗼𝘄 𝗴𝗼𝗼𝗱 𝗶𝘁 𝗶𝘀 Корреляция между рецензиями человека и человека составляет 0.41. Корреляция между AI и человеком достигает 0.42. Это близко к согласованию рецензентов сегодня.

Ссылка: