Hoy anunciamos ARC Prize Verified, un programa para aumentar el rigor en la evaluación de sistemas de frontera en ARC-AGI Este programa añade un panel académico externo para auditar nuestro proceso de pruebas También damos la bienvenida a 5 nuevos laboratorios de IA como patrocinadores de ARC-AGI-3
Programa de Auditoría Académica del Premio ARC Estamos emocionados de dar la bienvenida a cuatro asesores académicos para mejorar nuestro proceso de pruebas. Ellos: - Proporcionarán supervisión externa de nuestro protocolo de conjunto de pruebas ocultas - Auditarán y verificarán nuestros métodos de prueba - Co-escribirán las mejores prácticas para las pruebas de referencia
Hoy se unen al panel: - Todd Gureckis (Profesor de Psicología en NYU) - Guy Van den Broeck (Profesor de Ciencias de la Computación en UCLA) - Melanie Mitchell (Profesora en el Instituto Santa Fe) - Vishal Misra (Decano Adjunto de Computación y AI en Columbia)
Dando la bienvenida a 5 patrocinadores de laboratorio Estamos emocionados de anunciar nuestras primeras contribuciones externas al laboratorio, fondos restringidos dedicados a mejorar la calidad de ARC-AGI-3 @ndea @xai @Googleorg @NousResearch @PrimeIntellect
Insignia Verificada del Premio ARC Muchas organizaciones están ansiosas por probar en ARC-AGI, pero los puntajes autoinformados varían en consistencia de pruebas. Solo los puntajes evaluados en nuestro conjunto de pruebas oculto serán reconocidos como puntajes de rendimiento verificados. Una nueva Insignia Verificada del Premio ARC denotará estos.
180