arXiv論文メモ
新着一覧
cs.RO / cs.LG · 査読状況未確認

ロボット行動モデルの計算量を三つの軸で調整する

Decoupled Early Exits for Task-Dependent Compute Allocation in Flow-Matching VLAs

Riccardo Andrea Izzo, Rimvydas Rubavicius, Gianluca Bardaro, Subramanian Ramamoorthy, Matteo Matteucci, Alessandro Suglia

この論文をやさしく読む

ひとことで言うと

ロボットの視覚言語行動モデルで、視覚側と行動側の実行層数、ノイズ除去回数をタスクに合わせて調整する方法です。

何に役立つ?

ロボット制御に必要な推論時間と計算量を減らす設計の参考になります。効果はSmolVLAとπ₀.₅、LIBEROとMeta-Worldで評価されています。

この研究の面白いところ

視覚側、行動側、ノイズ除去回数が別々の資源に効き、組み合わせによって成功率を保つだけでなく改善しました。

どこまで分かった?

数値は評価した二つのモデルと二つのベンチマークでの結果です。別のロボットや実機運用で同じ削減率になるかは要旨から分かりません。

v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。

アブストラクトの日本語訳

フローマッチングを使う視覚言語行動モデル(VLA)は、事前学習済みの視覚言語モデル(VLM)を基盤とし、連続的なロボット行動を生成する行動エキスパートを組み合わせた、汎用ロボット制御の候補である。ただしパラメータ数が非常に多く、計算量がロボット制御には過大となりやすい。既存の方法は主に、中間で処理を終えることでVLM基盤の層を飛ばすか、ノイズ除去のステップ数を減らすが、行動エキスパートの深さは変えない。 本研究は、基盤の深さV、行動エキスパートの深さA、ノイズ除去ステップ数Dを、共同で設定できる三つの計算量調整軸とする枠組みを提案する。事前学習済みVLAの基盤と行動エキスパートの中間層に軽量なExit Transformerを取り付け、方策の最終層の出力を各出口へ蒸留する。さらに、飛ばした基盤層に対応する欠けたキーと値を補うKVキャッシュ合成機構を導入し、行動エキスパートを基盤より深い位置まで実行できるようにする。最適な計算予算はタスクに依存し、有効な軸や深さはタスクごとに異なる。 元の方策を最初から学習し直す必要はなく、各出口によるパラメータ増はSmolVLAで2.1%、π₀.₅で4.1%にとどまる。二つのVLA(SmolVLAとπ₀.₅)と二つのベンチマーク(LIBEROとMeta-World)で検証したところ、Vは主に演算量、Aは主に遅延を減らし、Dは両方を改善するという補完的な効果が見られた。V、A、Dを組み合わせた設定では、平均成功率を5.6%改善しながら、遅延を79.2%、演算量をFLOPsで31.8%削減した。

v1の要旨から自動生成。本文の精読・人による確認は未実施。

初稿
2026-09-24(UTC)
最新改訂
2026-09-24 · v1
査読・掲載
査読状況未確認
arXivで読むPDF

更新履歴

取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。

原文の要旨

Flow-matching Vision-Language-Action (VLA) models have emerged as a potential solution for generalist robot control, designed by combining a pretrained Vision-Language Model (VLM) backbone with an action expert that generates continuous robot actions. While these models exhibit impressive capabilities, due to their very high number of parameters, their computational requirements are often prohibitive for robotics control. To mitigate these inefficiencies, existing methods predominantly skip VLM backbone layers with early exits or reduce denoising steps, while leaving action expert depth untouched. We propose a framework that exposes backbone depth $V$, action expert depth $A$, and denoising steps $D$ as three jointly configurable compute axes in a VLA. Starting from a pretrained VLA, we attach lightweight Exit Transformers (ET) at intermediate depths in both the backbone and the action expert, trained to distil the last layer of the policy into each exit. Furthermore, we introduce a KV Cache synthesis mechanism that manages the missing keys and values of the skipped backbone layers, allowing the action expert to exit deeper than the backbone. Finally, we show that the optimal compute budget is task-dependent, with different tasks benefiting from different axes and depths. Notably, our method does not require training the original policy from scratch, and for each exit, it increases the number of parameters by only $2.1\%$ for SmolVLA and $4.1\%$ for $\pi_{0.5}$. We validate our approach across two flow-matching VLAs (SmolVLA, $\pi_{0.5}$) and two benchmarks (LIBERO, Meta-World), revealing complementary effects: $V$ and $A$ respectively reduce FLOPs and latency, while $D$ improves both. Our joint configurations $(V,A,D)$ reduce latency by $79.2\%$ and computation (FLOPs) by $31.8\%$, while improving mean success rate by $5.6\%$.

arXiv ID: 2609.29382 / 要約の誤りについて