履歴をまとめて削除する危険度を学ぶDRSR
DRSR: Learning Set-Level Deletion Risk for Efficient Long-Horizon Agents
この論文をやさしく読む
ひとことで言うと
エージェントの履歴を複数まとめて消したときの危険度を予測し、安全な範囲で圧縮する方法。
何に役立つ？
長時間のエージェント作業で、必要な情報を残しながら履歴のトークン費用を減らす設計に役立つ。
この研究の面白いところ
個別の重要度ではなく、消す集合と残る文脈の組み合わせを評価し、安全性が足りなければ削除を見送る。
どこまで分かった？
報酬とトークン削減の数値はWorkBuddyBench Full260と固定Eval40での評価結果である。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
長時間動く言語モデルエージェントは、推論の履歴、道具とのやり取り、観測を蓄積するが、それらの関連性は現在の判断とともに変わる。既存の圧縮法は過去の単位を個別に採点することが多い。しかし複数の単位を削除する安全性は、各単位の点数だけでは通常決まらない。重複した証拠、小さな影響の積み重ね、削除後に残る情報も重要である。本研究は、削除する集合に対して危険度の制約を課す選択問題として履歴圧縮を定式化するDirect Relational Set-Risk Pruning（DRSR）を導入する。オフラインでは、手順上有効な履歴ブロックを組み合わせて削除し、記録済みの同じ次の出力に対する教師強制下の尤度の変化を測ることで、正確な反事実的教師信号を作る。軽量な採点器は、候補履歴と現在の行動前状態との実行時に見える関係、削除部分と保持部分の関係、集合内の組ごとの構造から、集合全体の害を予測する。運用時には構造的に有効な少数の削除候補を採点し、新しさ、手順、予算、学習した危険度の制約内で削除可能な最大の集合を消す。十分に安全な集合がなければ削除しない。WorkBuddyBench Full260では、平均報酬が0.699から0.802へ上がり、モデルの総トークン数は20.820%減った。固定したEval40比較では、課題あたり121.1万トークンで報酬0.794を得て、非圧縮のエージェントよりトークンが35.850%少なかった。仕組みの分析と要素を除いた比較から、判断に応じた関係、残る文脈の情報、候補間の相互作用、削除を控える仕組みがそれぞれ信頼できる間引きに寄与した。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-23（UTC）
- 最新改訂
- 2026-09-23 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-23 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Long-horizon language-model agents accumulate reasoning traces, tool exchanges, and observations whose relevance changes with the current decision. Existing compression strategies often score historical units independently, but the safety of deleting several units is generally not determined by their singleton scores: redundant evidence, accumulated small effects, and the information that remains after deletion all matter. We introduce Direct Relational Set-Risk Pruning (DRSR), which formulates agent-history compression as risk-constrained selection over deletion sets. Offline, DRSR constructs exact counterfactual supervision by jointly deleting protocol-valid history Blocks and measuring the change in teacher-forced likelihood of the same recorded next output. A lightweight scorer then predicts set-level harm from online-visible relations between candidate history and the current pre-action state, together with deleted-retained and pairwise set structure. At deployment, DRSR evaluates a small set of structurally valid deletion candidates with the lightweight scorer and removes the largest feasible set under recency, protocol, budget, and learned-risk constraints, abstaining when no set is sufficiently safe. On WorkBuddyBench Full260, DRSR increases mean reward from 0.699 to 0.802 while reducing total model tokens by 20.820%. On the fixed Eval40 comparison, it obtains 0.794 reward at 1.211M tokens per task, using 35.850% fewer tokens than the uncompressed agent. Mechanistic analyses and ablations further show that decision-conditioned relations, retained-context information, pair interactions, and abstention each contribute to reliable pruning.
著者のコメント
34 pages
arXiv ID: 2609.27276 ／ 要約の誤りについて