[@SentientAGI ] El equipo de Sentient ha desarrollado una herramienta de evaluación llamada LiveCodeBench Pro, que ha sido oficialmente adoptada por la mayor conferencia de IA del mundo y ha logrado pasar la revisión de un artículo, lo cual es un logro importante! LiveCodeBench Pro puede ser algo desconocido para todos. ■ ¿Qué es LiveCodeBench Pro? - Una herramienta para evaluar y comparar adecuadamente las habilidades de codificación de los modelos de inteligencia artificial (IA) más recientes, especialmente los LLM (modelos de lenguaje de gran tamaño) (¿como comparar tarjetas gráficas?) ■ Significado y propósito - Los métodos de evaluación de codificación existentes tienen limitaciones, como filtraciones de problemas, criterios de evaluación laxos y la inflación de puntajes a través de trucos de prompts. - Manteniendo las mismas condiciones de problemas, tiempo, memoria y evaluación que en competiciones de programación, se verifica con precisión en un entorno real si los LLM pueden realmente escribir algoritmos complejos. Parece que la herramienta de evaluación desarrollada por el equipo de Sentient ha sido reconocida oficialmente a nivel mundial, ¡una gran noticia! 🫡 Gracias a esto, parece que se avecina un mundo más justo en la industria de la codificación.