モデル公開

Greg Brockman氏が引用:GPT-6 AstraがARC-AGI-3でSOTA、ベンチマークは飽和へ

原題:arc-agi-3 is now saturated

AI 要約

Greg Brockman氏は@arcprizeの評価を引用し、OpenAIのGPT-6 AstraがARC-AGI-3でSOTAを達成したと述べ、同ベンチマークは飽和したと指摘した。Astraの標準ハーネスでのスコアは63%、新しいProvider Adapterハーネスでは99%に達し、ARC-AGI-3の96%のレベルで人間のパフォーマンスを上回った。リーダーボードの図は、より高い推論レベルが通常は低コストになることも示している。Astraがより少ない動作でクリアし、モデル呼び出しとトークン数が減るためだ。

要点

  • Greg Brockman氏は@arcprizeの評価を引用し、OpenAIのGPT-6 AstraがARC-AGI-3でSOTAを達成したと述べ、同ベンチマークは飽和したと指摘した。
  • Astraの標準ハーネスでのスコアは63%、新しいProvider Adapterハーネスでは99%に達し、ARC-AGI-3の96%のレベルで人間のパフォーマンスを上回った。
  • リーダーボードの図は、より高い推論レベルが通常は低コストになることも示している。
  • Astraがより少ない動作でクリアし、モデル呼び出しとトークン数が減るためだ

概要

公開日時
更新日時
出典
X:Greg Brockman (@gdb)
カテゴリ
モデル公開
AI スコア
72
原文を読む 情報源で全文を読む
おすすめの理由

转发 ARC Prize 对 GPT-6 Astra 的评测数据,标准与 Provider Adapter 两种 harness 分差大,可据此了解 harness 对得分的影响。

関連エンティティ

出典と著作権

本記事は AIHOT の公開 API が提供する厳選タイトルと AI 要約に基づいており、出典の明記と元記事へのリンクを行っています。原文の著作権は元の媒体と著者に帰属し、当サイトは全文を転載しません。

原文記事 · AIHOT 記事

引用方法

本記事を引用する際は、タイトル・日付・パーマリンクを保持し、出典をOrange Newsと明記してください。

Orange News:Greg Brockman氏が引用:GPT-6 AstraがARC-AGI-3でSOTA、ベンチマークは飽和へ。2026年9月4日。https://new.nat6.net/ja/news/cmtm2suk00171rooej14mutgj/

すべて見る →