Artículos e investigación

Estudio de Arena: los jueces LLM favorecen sus propias respuestas un 70% más que los humanos

Título original:LLM judges prefer their own responses 70% more often than humans do

Resumen de IA

Arena realizó 34.580 veredictos con 12 modelos sobre 1.460 combates reales de Text Arena y halló que los modelos favorecen sus propias respuestas en promedio un 70% más que los humanos; GPT-6 Astra se eligió a sí mismo en el 88% de los combates. Los tres jueces de OpenAI fueron 37 puntos más indulgentes con los modelos de OpenAI que los humanos; la concordancia entre jueces de IA fue del 79,4%, pero solo del 56,9% con los votantes humanos; los modelos rara vez declaran empate, y Sol forzó un ganador en el 96% de los combates.

Puntos clave

  • Arena realizó 34.
  • 580 veredictos con 12 modelos sobre 1.
  • 460 combates reales de Text Arena y halló que los modelos favorecen sus propias respuestas en…
  • GPT-6 Astra se eligió a sí mismo en el 88% de los combates.
  • Los tres jueces de OpenAI fueron 37 puntos más indulgentes con los modelos de OpenAI que los humanos

Resumen rápido

Publicado
Actualizado
Fuente
X:Arena (@arena)
Categoría
Artículos e investigación
Puntuación IA
67
Leer el original Leer el artículo completo en la fuente original
Por qué importa

基于 1,460 场真实对战和 34,580 条裁决的实测数据,读者可以据此校准对 LLM-as-a-judge 评测结果的信任程度。

Entidades relacionadas

Fuente y derechos

Este artículo se basa en títulos seleccionados y resúmenes de IA de la API pública de AIHOT, con atribución y enlaces de vuelta. Los derechos del original pertenecen a los medios y autores originales; este sitio no reproduce textos completos.

Artículo original · Ficha de AIHOT

Cómo citar

Al citar este artículo, conserva el título, la fecha y el enlace permanente, e indica que la fuente es Orange News.

Orange News: Estudio de Arena: los jueces LLM favorecen sus propias respuestas un 70% más que los humanos. 30. septiembre 2026. https://new.nat6.net/es/news/u6afu3icor0mjvuoie6d2fd2w/

Ver todo →