arXiv論文メモ
新着一覧
cs.AI / cs.CL / cs.NE · 査読状況未確認

専用実行基盤が誘導する動作をエージェントの重みに移す

Harness-Zero: Harness Distillation via Agent-as-Harness

Haoran Ye, Yuxing Lu, Haonan Dong, Zhaochen Su, Guojie Song

この論文をやさしく読む

ひとことで言うと

外部の専用実行基盤が行っていた応答の修正や誘導を、学習によってエージェント本体に覚えさせます。

何に役立つ?

分野ごとに多数の実行基盤を運用する負担を減らす用途が考えられます。実験では固定した対象ハーネスの下で成功率を評価しています。

この研究の面白いところ

行動空間の違いを、別のエージェントによる実行前修正で埋めます。専用基盤を外した学習済みモデルが、基盤を付けた元モデルを上回った点も比較されています。

どこまで分かった?

成功率は3分野のタスクのマクロ平均で、28パターンの回復率とは別の指標です。専用ハーネスを外すのであり、環境との接続基盤を一切使わなくなるという意味ではありません。

v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。

アブストラクトの日本語訳

モデルと環境の相互作用を仲介する外部システムであるエージェントのハーネスは、性能を大幅に向上させ得るが、その利点は運用時にもそのハーネスを使うことに依存する。最適なハーネスは分野、個別問題、モデルによって異なるため、汎用エージェントは最適でない共通ハーネスを使うか、増え続ける専用ハーネスを切り替える必要がある。そこで、分野や個別問題に最適化したハーネスを学習時の指導に使い、それが誘導する行動をモデルの重みへ移すことで、単一の固定された対象ハーネスの下でも利点を維持する、エージェントのハーネス蒸留を研究する。課題は、2つのハーネスで行動空間と利用可能な情報が異なり、最適化した側の指導を対象側の教師信号としてそのまま使えないことである。エージェントをハーネスとして使うことで蒸留を可能にするHarness-Zeroを提案する。最適化したハーネスに導かれた支援エージェントが、対象ハーネスの行動空間で実行される前に生徒の応答を修正し、ハーネスからの指導を学習用実演へ変える。得られた行動軌跡による微調整が、ハーネスに誘導された動作をモデルへ内在化するため、運用時には専用ハーネスを取り外せる。知識労働、ツール利用、科学の各分野にわたる実験は、次の結果を示す。(1)同じ進化済みハーネスを使う最先端LLMでは、エージェントをハーネスとする方式がコードによる方式を上回る。(2)運用時に専用ハーネスを取り外しても、Harness-Zeroは基盤モデルのタスク成功率のマクロ平均を23.3%から44.3%へ改善し、専用ハーネスを付けたままの41.7%さえ上回る。(3)基盤モデルにはなかった、ハーネスに誘導される動作を回復し、3分野の28パターンで平均82.3%の回復率を達成する。

v1の要旨から自動生成。本文の精読・人による確認は未実施。

初稿
2026-09-21(UTC)
最新改訂
2026-09-21 · v1
査読・掲載
査読状況未確認
arXivで読むPDF

更新履歴

取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。

原文の要旨

Agent harnesses, the external systems that mediate model-environment interaction, can substantially improve agent performance, but their gains remain tied to the harness at deployment. Because the best harness varies across domains, instances, and models, a general-purpose agent must either settle for a suboptimal shared harness or route among an ever-growing set of specialized ones. We therefore study agent harness distillation: using a domain- or instance-optimized harness as training-time guidance and transferring the behaviors it induces into model weights, so that its gains survive under a single fixed target harness. The challenge is that the two harnesses differ in action space and available information, so guidance from the optimized harness cannot serve directly as supervision for the target one. We introduce Harness-Zero, which enables harness distillation through agent-as-harness. Guided by the optimized harness, a harnessing agent corrects student responses before execution in the target harness's action space, turning harness guidance into training demonstrations. Fine-tuning on the resulting trajectories internalizes harness-induced behavior into the model, so the specialized harness can be removed at deployment. Our experiments spanning knowledge work, tool use, and science domains show that: (1) For frontier LLMs using the same evolved harness, agent-as-harness outperforms code-as-harness. (2) With the specialized harness removed at deployment, Harness-Zero improves the base model's macro-average task success from 23.3% to 44.3%, even exceeding the 41.7% it reaches with that harness still attached. (3) Harness-Zero recovers harness-induced behaviors absent from the base model, with 82.3% average recovery across 28 patterns in the three domains.

arXiv ID: 2609.24974 / 要約の誤りについて