言語エージェントの訓練に使う作業環境を変化させる
Breaking the Environment Wall: Evolving LLM Agent Environments for Recursive Self-Improvement
この論文をやさしく読む
ひとことで言うと
散らばった情報や食い違う証拠がある作業環境を整理し、さらに訓練用に難しく変化させる仕組みです。
何に役立つ?
複雑なファイルや履歴を扱うエージェントの評価・訓練に役立つ可能性があります。要旨で示す改善は30課題、9モデルの実験です。
この研究の面白いところ
環境から文脈を集める仕組みと、仮想的な出来事で環境を難しくする仕組みを組み合わせています。
どこまで分かった?
評価は記載された30課題に限られます。仮想的に変化させた環境での改善が、現実のあらゆる業務に広がるかは要旨だけでは分かりません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
事務作業や科学実験など現実の仕事では、言語モデルのエージェントが環境と繰り返しやり取りし、状況に応じて操作する必要がある。しかし環境はエージェントが扱いやすいように整えられているとは限らない。情報は散在し、関係する証拠に紛らわしい情報や食い違う版が混ざり、時間とともに新しい雑音や難しい課題も増える。こうした問題で、最先端のエージェントの性能が83.9%から57.6%へ下がる例がある。 著者らは、この問題に対処する27Bの追加学習済みモデルを含むEnv-Rethinkを提案する。第一に、関連ファイルを整理するCollection Mapと、データをまたぐ関係を文脈化するEvent Logを状況に合わせて作り、必要な文脈を補う。第二に、オフラインの行動履歴学習を通じて追加学習済みモデルを使い、環境に潜む雑音の問題を見つける。第三に、環境状態と証拠同士の関係を変える仮想的な出来事の履歴を使って環境を発展させ、さらなるエージェント改善のため、より難しい環境を作る。30課題で9モデルを評価した実験では、後段の課題性能を改善し、評価基準の通過率が15.1%超向上した。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-24(UTC)
- 最新改訂
- 2026-09-24 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-24 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Many real-world tasks (e.g., office workflows, scientific experimentation) require LLM agents to interact repeatedly with their environments for context-dependent operations. However, such environments are often not agent-ready. First, information is often scattered and fragmented across the environment. Second, relevant evidence in the environment is often mixed with misleading information and conflicting versions. Third, environments evolve over time, introducing new noise and more challenging tasks. These challenges can substantially degrade performance for state-of-the-art AI agents (e.g., from 83.9% to 57.6%). To address these challenges, we propose Env-Rethink (a system with 27B post-trained model) that supports three main capabilities: (1) It adaptively builds Collection Maps (for organizing related files) and Event Logs (for contextualizing cross-data relationships) to supplement necessary context; (2) It further leverages the post-trained model (through offline trajectory learning) to identify underlying noise issues in the environment; (3) It ultimately evolves environments through virtual event histories that alter environmental states and evidence relationships, producing more tricky ones for further agent improvement. Experiments show that Env-Rethink can effectively improve downstream task performance (with over 15.1% rubric pass rate improvement across nine models on 30 tasks).
arXiv ID: 2609.29773 / 要約の誤りについて