Hoje estamos anunciando o ARC Prize Verified, um programa para aumentar o rigor da avaliação de sistemas de fronteira no ARC-AGI Este programa adiciona um painel acadêmico terceirizado para auditar nosso processo de teste Também estamos dando as boas-vindas a 5 novos laboratórios de IA como patrocinadores do ARC-AGI-3
Programa de Auditoria Acadêmica do Prêmio ARC Estamos entusiasmados em receber quatro orientadores acadêmicos para melhorar nosso processo de teste. Eles irão: - Fornecer supervisão externa de nosso protocolo de conjunto de teste oculto - Auditar e verificar nossos métodos de teste - Práticas recomendadas de coautoria para testes de benchmark
Juntando-se ao painel hoje estão: - Todd Gureckis (Professor de Psicologia na NYU) - Guy Van den Broeck (Professor de Ciência da Computação na UCLA) - Melanie Mitchell (Professora do Instituto Santa Fé) - Vishal Misra (Vice-Reitor de Computação e IA da Columbia)
Dando as boas-vindas a 5 patrocinadores de laboratório Temos o prazer de anunciar nossas primeiras contribuições de laboratórios externos, fundos restritos dedicados ao avanço da qualidade do ARC-AGI-3 @ndea @xai @Googleorg @NousResearch @PrimeIntellect
Selo de Verificação do Prêmio ARC Muitas organizações estão ansiosas para testar no ARC-AGI, mas as pontuações auto-relatadas variam na consistência do teste Somente as pontuações avaliadas em nosso conjunto de testes ocultos serão reconhecidas como pontuações de desempenho verificadas Um novo selo de verificação do ARC Prize indicará estes
179