Community Evals: karena kami tidak lagi mempercayai papan peringkat kotak hitam melebihi komunitas
Judul asli:Community Evals: Because we're done trusting black-box leaderboards over the community
Ringkasan AI
LMSys meluncurkan kerangka evaluasi berbasis komunitas Community Evals yang bertujuan mendemokratisasi kecerdasan artifisial melalui sumber terbuka dan sains terbuka. Kerangka ini memungkinkan komunitas menyumbangkan dan meninjau kasus evaluasi untuk menguji model secara transparan dan dapat direproduksi. Langkah ini bertujuan mengubah keadaan yang bergantung pada papan peringkat "kotak hitam" dari segelintir lembaga, sehingga komunitas yang lebih luas dapat berpartisipasi dalam mendefinisikan dan mengukur kemampuan serta nilai model AI.
Poin utama
- LMSys meluncurkan kerangka evaluasi berbasis komunitas Community Evals yang bertujuan…
- Kerangka ini memungkinkan komunitas menyumbangkan dan meninjau kasus evaluasi untuk menguji model…
- Langkah ini bertujuan mengubah keadaan yang bergantung pada papan peringkat "kotak hitam" dari…
Ringkasan cepat
- Waktu terbit
- Waktu diperbarui
- Sumber
- Hugging Face 社区博客(混合发现)
- Kategori
- Lainnya
- Skor AI
- 76
Hugging Face 推社区评测挑战黑盒排行榜,开源生态评测标准可能改变
Sumber dan hak cipta
Artikel ini disusun berdasarkan judul pilihan dan ringkasan AI dari API publik AIHOT, dengan sumber yang dicantumkan dan tautan balik; hak cipta konten asli milik media dan penulis aslinya, situs ini tidak menyalin artikel secara penuh.
Cara mengutip
Saat mengutip artikel ini, sertakan judul, tanggal, dan tautan permanen, serta cantumkan sumber Orange News.
Orange News: Community Evals: karena kami tidak lagi mempercayai papan peringkat kotak hitam melebihi komunitas. 4 Februari 2026. https://new.nat6.net/id/news/cmoegbhak009jslxxhmd12ssc/