Сегодня мы объявляем о запуске программы ARC Prize Verified, которая направлена на повышение строгости оценки передовых систем на ARC-AGI Эта программа добавляет стороннюю академическую панель для аудита нашего процесса тестирования Мы также приветствуем 5 новых лабораторий ИИ в качестве спонсоров ARC-AGI-3
Программа академического аудита ARC Prize Мы рады приветствовать четырех академических консультантов, которые помогут улучшить наш процесс тестирования. Они будут: - Обеспечивать внешний контроль нашего протокола скрытого тестового набора - Аудировать и проверять наши методы тестирования - Совместно разрабатывать лучшие практики для бенчмаркового тестирования
Сегодня в панели участвуют: - Тодд Гурецкис (профессор психологии в NYU) - Гай Ван ден Брок (профессор компьютерных наук в UCLA) - Мелани Митчелл (профессор в Институте Санта-Фе) - Вишал Мисра (заместитель декана по вычислениям и ИИ в Колумбии)
Приветствуем 5 спонсоров лаборатории Мы рады объявить о наших первых внешних взносах в лабораторию, целевых фондах, выделенных на повышение качества ARC-AGI-3 @ndea @xai @Googleorg @NousResearch @PrimeIntellect
Значок подтверждения ARC Prize Многие организации стремятся протестировать на ARC-AGI, но самостоятельно сообщаемые результаты варьируются по консистентности тестирования Только результаты, оцененные на нашем скрытом тестовом наборе, будут признаны проверенными результатами производительности Новый значок подтверждения ARC Prize будет обозначать это
172