Community Evals: потому что мы больше не доверяем чёрным ящикам рейтингов больше, чем сообществу
Оригинальный заголовок:Community Evals: Because we're done trusting black-box leaderboards over the community
ИИ-резюме
LMSys представила управляемую сообществом платформу оценки Community Evals, призванную продвигать демократизацию искусственного интеллекта через открытый исходный код и открытую науку. Платформа позволяет сообществу вносить и проверять оценочные кейсы, тестируя модели прозрачным и воспроизводимым образом. Этот шаг направлен на изменение ситуации, когда приходится полагаться на «чёрные ящики» рейтингов нескольких организаций, и на вовлечение более широкого сообщества в определение и измерение возможностей и ценности ИИ-моделей.
Ключевые моменты
- LMSys представила управляемую сообществом платформу оценки Community Evals,призванную продвигать…
- Платформа позволяет сообществу вносить и проверять оценочные кейсы,тестируя модели прозрачным и…
- Этот шаг направлен на изменение ситуации,когда приходится полагаться на «чёрные ящики» рейтингов…
Кратко
- Опубликовано
- Обновлено
- Источник
- Hugging Face 社区博客(混合发现)
- Категория
- Другое
- Оценка ИИ
- 76
Hugging Face 推社区评测挑战黑盒排行榜,开源生态评测标准可能改变
Источник и авторские права
Статья основана на отобранных заголовках и ИИ-резюме из открытого API AIHOT с указанием источника и обратными ссылками. Авторские права на оригинал принадлежат исходным изданиям и авторам; сайт не воспроизводит полные тексты.
Как цитировать
При цитировании сохраняйте заголовок, дату и постоянную ссылку, указывая источник: Orange News.
Orange News: Community Evals: потому что мы больше не доверяем чёрным ящикам рейтингов больше, чем сообществу. 4 февраля 2026. https://new.nat6.net/ru/news/cmoegbhak009jslxxhmd12ssc/