ARC Prize выпустил технический отчет ARC-AGI-2: передовые модели набирают менее 5%, люди решают 100% задач
Оригинальный заголовок:ARC-AGI-2 A New Challenge for Frontier AI Reasoning Systems
ИИ-резюме
ARC Prize выпустил технический отчет ARC-AGI-2 и представил новый бенчмарк для передовых систем ИИ-рассуждения; задачи по-прежнему легки для людей и трудны для ИИ, а возможность полного перебора снижена. В тестировании участвовали 400 человек и 1 417 задач: люди решили все задачи, в среднем около 2,3 минуты на задачу. На момент выпуска ведущие модели не превышали 5% успеха на ARC-AGI-2, тогда как аналогичные модели на ARC-AGI-1 обычно показывали от 20% до 50%.
Ключевые моменты
- ARC Prize выпустил технический отчет ARC-AGI-2 и представил новый бенчмарк для передовых систем…
- задачи по-прежнему легки для людей и трудны для ИИ,а возможность полного перебора снижена.
- В тестировании участвовали 400 человек и 1 417 задач: люди решили все задачи,в среднем около 2,3…
- На момент выпуска ведущие модели не превышали 5% успеха на ARC-AGI-2,тогда как аналогичные модели…
Кратко
- Опубликовано
- Обновлено
- Источник
- ARC Prize:官方博客
- Категория
- Статьи и исследования
- Оценка ИИ
- 67
官方技术报告给出人类实测与前沿模型得分对比,可以据此了解新基准的难度设计和它想度量的能力差距。
Источник и авторские права
Статья основана на отобранных заголовках и ИИ-резюме из открытого API AIHOT с указанием источника и обратными ссылками. Авторские права на оригинал принадлежат исходным изданиям и авторам; сайт не воспроизводит полные тексты.
Как цитировать
При цитировании сохраняйте заголовок, дату и постоянную ссылку, указывая источник: Orange News.
Orange News: ARC Prize выпустил технический отчет ARC-AGI-2: передовые модели набирают менее 5%, люди решают 100% задач. 20 мая 2025. https://new.nat6.net/ru/news/cmtyo2p2s03g5rog00pkk4enc/