arXiv論文メモ
新着一覧
cs.AI · 査読状況未確認

環境で検証できる状態として行動計画を学習するモデル

World State Generator

Sungheon Jeong, Sanggeon Yun, Ryozo Masukawa, Haleh Alimohamadi, Mahdi Imani, Mohsen Imani

この論文をやさしく読む

ひとことで言うと

AIの計画を単なる文章ではなく、環境で達成を確認できる状態の列として学ばせ、失敗した後も修正できるようにします。

何に役立つ?

考えられる用途は、規則や前後関係のある環境で複数手順の作業を行うエージェントです。公開ベンチマークで課題全体の成功率改善を報告しています。

この研究の面白いところ

到達可能性を確認した人工環境で、失敗と有効な修正を対にして学習します。失敗の言い換えを繰り返すのではなく、環境の制約として残りの計画へ反映する設計です。

どこまで分かった?

約22万6000軌跡、七つの分野・ベンチマークという範囲です。要旨には成功率の具体値や比較した非公開モデル名はなく、あらゆる現実環境での到達保証は示されていません。

v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。

アブストラクトの日本語訳

言語エージェントは計画と行動を通じて複雑な課題を解く。環境に拒否される一つの手順だけで目標に届かなくなり、その後の対応が課題の成否を決める。プロンプトで計画させる方式は、まさにこの場面で失敗する。拒否された手順を言い換え、同じ拒否に遭い、前進しないまま試行回数を使い切る。これは計画が環境と結び付いておらず、拒否を計画のどこに反映すべきか分からないためである。課題を実行する環境には、固有の規則、許容される行動、制約がある。 本研究では七つの分野で人工的な環境を作り、訓練データを取り出す。プログラムが各環境の規則を適用して目標達成を採点し、初期状態から目標へ到達可能な環境だけを採用する。エージェントをその中で動作させ、検証された失敗と、その実行を環境が認定する状態へ導いた修正を対にした、約22万6000軌跡の記録を得る。この記録を使い、計画を検査可能な環境の状態として記述し、実行先の環境に計画を合わせ続けるモデルWorld State Generator(WSG)を訓練する。 言語で書いた計画に欠けているのは、この整合である。実行先には物理的限界、論理的依存関係、必須の順序があるが、言語はそれを明示しておらず、計画は状態が失敗して初めてそれらの規則に直面する。WSGは失敗を環境が示した規則として受け取り、残りの状態をそれに従うよう書き換えるため、実行の進行に応じて計画が環境に適応する。七つの公開ベンチマークで、WSGは約300億パラメータの二つの公開モデルについて、プロンプト方式より一連の課題の成功率を高め、非公開モデルの水準に引き上げた。

v1の要旨から自動生成。本文の精読・人による確認は未実施。

初稿
2026-09-21(UTC)
最新改訂
2026-09-21 · v1
査読・掲載
査読状況未確認
arXivで読むPDF

更新履歴

取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。

原文の要旨

Language agents solve complex tasks through plans and actions. A single step the world refuses puts the goal out of reach, and what the agent does next decides the task. Prompted planners fail at exactly this point, rewriting the refused step in new words, meeting the same refusal, and burning the attempt budget without moving. They fail because the plan was never tied to the world, so a refusal has nothing in the plan to attach to. A world is where a task runs, and it has its own rules, its own admissible actions, and its own constraints. We build synthetic worlds across 7 domains and extract training data from them. A program enforces each world's rules and grades its goal, and every world is admitted only if its goal is reachable from its initial state. Agents run inside and leave verified failures paired with repairs that carried the run to a state the world certified, a record of about 226K trajectories. On this record we train the World State Generator, a model that writes a plan as checkable states of the world and keeps that plan aligned with the world it runs in. That alignment is what a plan written in language lacks, since the world it runs in has physical limits, logical dependencies, and required orders the language never states, and the plan encounters these rules only when a state fails. WSG takes that failure as the rule the world has stated and rewrites the remaining states to obey it, so the plan bends to the world as the run goes on. Across 7 public benchmarks, WSG raises end-to-end success for two open models near 30B parameters over prompting and brings to the level of proprietary model.

arXiv ID: 2609.24744 / 要約の誤りについて