[@SentientAGI ] Команда Sentient разработала инструмент оценки под названием LiveCodeBench Pro, который официально принят на крупнейшей в мире конференции по ИИ и прошел рецензирование, что является важным достижением! LiveCodeBench Pro может быть вам незнаком. ■ Что такое LiveCodeBench Pro? - Инструмент для правильной оценки и сравнения навыков программирования современных моделей искусственного интеллекта (ИИ), особенно LLM (большие языковые модели) (например, как сравнение графических карт?) ■ Значение и цель - Существующие методы оценки программирования имеют ограничения, такие как утечка задач, слабые критерии оценки, завышение баллов с помощью хитростей в подсказках и т.д. - Поддерживая те же условия, что и в реальных задачах и соревнованиях по программированию, включая время, память и оценку, мы точно проверяем, может ли LLM действительно разрабатывать сложные алгоритмы в реальных условиях. Похоже, что инструмент оценки, разработанный командой Sentient, получил официальное признание на мировом уровне, что является отличной новостью 🫡 Благодаря этому, кажется, что в мире программирования наступит более справедливое время.