Articles et recherche

Ai2 publie l'étude et le benchmark Old Ideas, Novel Problems, révélant l'instabilité des LLM comme juges de nouveauté

Titre original:Can we trust LLMs to judge whether a research idea is novel?

Résumé IA

Ai2 publie l'étude Old Ideas, Novel Problems, son benchmark associé, les données, le code et un pipeline automatisé, pour tester la fiabilité des LLM en tant que juges de la nouveauté d'idées de recherche.

Points clés

  • Ai2 publie l'étude Old Ideas,Novel Problems,son benchmark associé
  • les données,le code et un pipeline automatisé
  • pour tester la fiabilité des LLM en tant que juges de la nouveauté d'idées de recherche.

En bref

Publié
Mis à jour
Source
Ai2 / Allen Institute for AI(RSS)
Catégorie
Articles et recherche
Score IA
64
Lire l'original Lire l'article complet à la source d'origine
Pourquoi c'est important

原文给出了跨六个 LLM 裁判的敏感性实验数据,读者可据此判断现有新颖性评估在 AI 生成想法上的可靠性边界。

Source et droits

Cet article s'appuie sur des titres sélectionnés et des résumés IA issus de l'API publique AIHOT, avec attribution et liens de retour. Les droits sur l'original restent ceux des médias et auteurs d'origine ; ce site ne reproduit pas les textes intégraux.

Article original · Fiche AIHOT

Comment citer

Pour citer cet article, conservez le titre, la date et le lien permanent, et indiquez Orange News comme source.

Orange News : Ai2 publie l'étude et le benchmark Old Ideas, Novel Problems, révélant l'instabilité des LLM comme juges de nouveauté. 27. octobre 2026. https://new.nat6.net/fr/news/p92a4pkxkheznj9nmt50o08l6/

Tout voir →