Greg Brockman氏が引用:GPT-6 AstraがARC-AGI-3でSOTA、ベンチマークは飽和へ
原題:arc-agi-3 is now saturated
AI 要約
Greg Brockman氏は@arcprizeの評価を引用し、OpenAIのGPT-6 AstraがARC-AGI-3でSOTAを達成したと述べ、同ベンチマークは飽和したと指摘した。Astraの標準ハーネスでのスコアは63%、新しいProvider Adapterハーネスでは99%に達し、ARC-AGI-3の96%のレベルで人間のパフォーマンスを上回った。リーダーボードの図は、より高い推論レベルが通常は低コストになることも示している。Astraがより少ない動作でクリアし、モデル呼び出しとトークン数が減るためだ。
要点
- Greg Brockman氏は@arcprizeの評価を引用し、OpenAIのGPT-6 AstraがARC-AGI-3でSOTAを達成したと述べ、同ベンチマークは飽和したと指摘した。
- Astraの標準ハーネスでのスコアは63%、新しいProvider Adapterハーネスでは99%に達し、ARC-AGI-3の96%のレベルで人間のパフォーマンスを上回った。
- リーダーボードの図は、より高い推論レベルが通常は低コストになることも示している。
- Astraがより少ない動作でクリアし、モデル呼び出しとトークン数が減るためだ
概要
- 公開日時
- 更新日時
- カテゴリ
- モデル公開
- AI スコア
- 72
おすすめの理由
转发 ARC Prize 对 GPT-6 Astra 的评测数据,标准与 Provider Adapter 两种 harness 分差大,可据此了解 harness 对得分的影响。
関連エンティティ
出典と著作権
本記事は AIHOT の公開 API が提供する厳選タイトルと AI 要約に基づいており、出典の明記と元記事へのリンクを行っています。原文の著作権は元の媒体と著者に帰属し、当サイトは全文を転載しません。
引用方法
本記事を引用する際は、タイトル・日付・パーマリンクを保持し、出典をOrange Newsと明記してください。
Orange News:Greg Brockman氏が引用:GPT-6 AstraがARC-AGI-3でSOTA、ベンチマークは飽和へ。2026年9月4日。https://new.nat6.net/ja/news/cmtm2suk00171rooej14mutgj/