論文・研究

gooseが5つのオープンソースcoding harnessを評価:合格率は同程度、タスクあたりコストは最大75%差

原題:Same Brain, Different Bill

AI 要約

goose公式は同一モデルgpt-6.1-sol(high reasoning effort)とTerminal-Bench 4.0の62タスクを用い、goose、Codex CLI、OpenCode、Hermes Agent、piの5つのオープンソースharnessそれぞれについて310回のスコアリング試験を実施した。

要点

  • goose公式は同一モデルgpt-6.
  • 1-sol(high reasoning effort)とTerminal-Bench 4.
  • 0の62タスクを用い、goose、Codex CLI、OpenCode、Hermes Agent、piの5つのオープンソースharnessそれぞれについて310回のスコアリング試験を実施した

概要

公開日時
更新日時
出典
goose 官方博客
カテゴリ
論文・研究
トピック
Agent エージェントAIコーディング
AI スコア
64
原文を読む 情報源で全文を読む
おすすめの理由

同一模型换不同 harness 通过率相差不大,成本却差出 75%,这组 310 次试验的对照数据可帮读者把选型注意力从模型转向 harness。

関連トピック

出典と著作権

本記事は AIHOT の公開 API が提供する厳選タイトルと AI 要約に基づいており、出典の明記と元記事へのリンクを行っています。原文の著作権は元の媒体と著者に帰属し、当サイトは全文を転載しません。

原文記事 · AIHOT 記事

引用方法

本記事を引用する際は、タイトル・日付・パーマリンクを保持し、出典をOrange Newsと明記してください。

Orange News:gooseが5つのオープンソースcoding harnessを評価:合格率は同程度、タスクあたりコストは最大75%差。2026年10月28日。https://new.nat6.net/ja/news/fukvhnr4747eqhe0yjrn9d8nc/

すべて見る →