ロボットの視覚・言語・行動モデルに固定長の記憶を追加
MemBodied: Recurrent Associative Memory for Vision-Language-Action Models
この論文をやさしく読む
ひとことで言うと
ロボットが過去の観測を必要とする作業を行うため、固定長の記憶を視覚・言語・行動モデルに加えた研究。
何に役立つ?
履歴が必要なロボット操作で、過去の画像をすべて文脈に残さずに行動を決めるモデルの設計に役立つ。
この研究の面白いところ
RMBenchの5課題で記憶なし方策の平均成功率の7.81倍、通常の再帰的記憶の2.98倍を報告し、追加パラメータも比較手法より少なかった。
どこまで分かった?
性能は要旨に記載のRMBenchとLIBERO-Longでの結果である。実環境の多様な長時間作業で同じ改善が得られるかは示されていない。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
視覚・言語・行動モデルは汎用ロボット制御の有力な基盤だが、大半の方策は現在の観測を超える一連の作業中の情報を保持・活用しない。過去の観測でしか得られない情報を必要とする操作課題では、この制約が重要になる。過去の観測を文脈に残せば情報を取り戻せるものの、文脈の肥大化と推論遅延の増加という大きな代償がある。そこで本研究は、相補的な二つの要素から成る固定長のエピソード記憶MemBodiedを導入する。一つは方策の呼び出しをまたいで相互作用を記録する連想的な状態、もう一つは初期場面を参照するための簡潔な表現を保つエピソードの基準点である。各方策呼び出しでは、過去の観測を直接使わず、現在の入力とこれらの記憶要素から行動を生成する。 記憶を必要とするRMBenchの5課題で、MemBodiedの平均成功率は記憶を持たない方策の7.81倍、通常の再帰的記憶の2.98倍だった。最も強い記憶拡張の比較手法も1.3倍上回り、追加パラメータ数は10分の1だった。全情報を観測できるLIBERO-Longでは成功率90.6%に達し、記憶を持たないπ₀方策より5.4%高かった。これらの結果は、履歴に依存する操作課題で方策の文脈を拡張する代わりに、MemBodiedを使えることを支持する。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-23(UTC)
- 最新改訂
- 2026-09-23 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-23 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Vision-Language-Action models provide a strong foundation for general-purpose robot control, yet a vast majority of policies do not preserve and leverage episode-level information beyond the current observation. This limitation is consequential in history-dependent manipulation tasks that depend on information available only in past observations. Retaining past observations in context can aid in recovering this information, but at the significant cost of ever-growing, bloated context and inference latency. We thus introduce MemBodied, a fixed-size episodic memory with two complementary components: an associative state that records interactions across policy calls and an episode anchor that preserves a compact representation of the initial scene as a reference. At each policy call, the model conditions action generation on the current input and the memory components, rather than directly using past observations. Across five evaluated RMBench tasks requiring memory, MemBodied achieves $7.81\times$ the mean success rate of a stateless policy and $2.98\times$ of vanilla recurrent memory, while outperforming the strongest memory-augmented baseline by $1.3\times$ with $10\times$ fewer added parameters. On the fully observable LIBERO-Long suite, it reached 90.6%, a 5.4% improvement over the stateless $\pi_0$ policy. These findings support MemBodied as a practical alternative to expanding the policy context for history-dependent manipulation.
arXiv ID: 2609.28256 / 要約の誤りについて