Статьи и исследования

ARC Prize выпустил технический отчет ARC-AGI-2: передовые модели набирают менее 5%, люди решают 100% задач

Оригинальный заголовок:ARC-AGI-2 A New Challenge for Frontier AI Reasoning Systems

ИИ-резюме

ARC Prize выпустил технический отчет ARC-AGI-2 и представил новый бенчмарк для передовых систем ИИ-рассуждения; задачи по-прежнему легки для людей и трудны для ИИ, а возможность полного перебора снижена. В тестировании участвовали 400 человек и 1 417 задач: люди решили все задачи, в среднем около 2,3 минуты на задачу. На момент выпуска ведущие модели не превышали 5% успеха на ARC-AGI-2, тогда как аналогичные модели на ARC-AGI-1 обычно показывали от 20% до 50%.

Ключевые моменты

  • ARC Prize выпустил технический отчет ARC-AGI-2 и представил новый бенчмарк для передовых систем…
  • задачи по-прежнему легки для людей и трудны для ИИ,а возможность полного перебора снижена.
  • В тестировании участвовали 400 человек и 1 417 задач: люди решили все задачи,в среднем около 2,3…
  • На момент выпуска ведущие модели не превышали 5% успеха на ARC-AGI-2,тогда как аналогичные модели…

Кратко

Опубликовано
Обновлено
Источник
ARC Prize:官方博客
Категория
Статьи и исследования
Оценка ИИ
67
Читать оригинал Читать полную статью в первоисточнике
Почему это важно

官方技术报告给出人类实测与前沿模型得分对比,可以据此了解新基准的难度设计和它想度量的能力差距。

Источник и авторские права

Статья основана на отобранных заголовках и ИИ-резюме из открытого API AIHOT с указанием источника и обратными ссылками. Авторские права на оригинал принадлежат исходным изданиям и авторам; сайт не воспроизводит полные тексты.

Оригинал статьи · Материал на AIHOT

Как цитировать

При цитировании сохраняйте заголовок, дату и постоянную ссылку, указывая источник: Orange News.

Orange News: ARC Prize выпустил технический отчет ARC-AGI-2: передовые модели набирают менее 5%, люди решают 100% задач. 20 мая 2025. https://new.nat6.net/ru/news/cmtyo2p2s03g5rog00pkk4enc/

Смотреть все →