Другое

Community Evals: потому что мы больше не доверяем чёрным ящикам рейтингов больше, чем сообществу

Оригинальный заголовок:Community Evals: Because we're done trusting black-box leaderboards over the community

ИИ-резюме

LMSys представила управляемую сообществом платформу оценки Community Evals, призванную продвигать демократизацию искусственного интеллекта через открытый исходный код и открытую науку. Платформа позволяет сообществу вносить и проверять оценочные кейсы, тестируя модели прозрачным и воспроизводимым образом. Этот шаг направлен на изменение ситуации, когда приходится полагаться на «чёрные ящики» рейтингов нескольких организаций, и на вовлечение более широкого сообщества в определение и измерение возможностей и ценности ИИ-моделей.

Ключевые моменты

  • LMSys представила управляемую сообществом платформу оценки Community Evals,призванную продвигать…
  • Платформа позволяет сообществу вносить и проверять оценочные кейсы,тестируя модели прозрачным и…
  • Этот шаг направлен на изменение ситуации,когда приходится полагаться на «чёрные ящики» рейтингов…

Кратко

Опубликовано
Обновлено
Источник
Hugging Face 社区博客(混合发现)
Категория
Другое
Оценка ИИ
76
Читать оригинал Читать полную статью в первоисточнике
Почему это важно

Hugging Face 推社区评测挑战黑盒排行榜,开源生态评测标准可能改变

Источник и авторские права

Статья основана на отобранных заголовках и ИИ-резюме из открытого API AIHOT с указанием источника и обратными ссылками. Авторские права на оригинал принадлежат исходным изданиям и авторам; сайт не воспроизводит полные тексты.

Оригинал статьи · Материал на AIHOT

Как цитировать

При цитировании сохраняйте заголовок, дату и постоянную ссылку, указывая источник: Orange News.

Orange News: Community Evals: потому что мы больше не доверяем чёрным ящикам рейтингов больше, чем сообществу. 4 февраля 2026. https://new.nat6.net/ru/news/cmoegbhak009jslxxhmd12ssc/

Смотреть все →