ロボットの体の仕組みを更新する操作支援
Know Your Body: A Harness for Direct and Self-Improving Robot Control with VLMs
この論文をやさしく読む
ひとことで言うと
視覚言語モデルに特定のロボットの体の働きを記録・更新させ、実機での作業成功率を調べた。
何に役立つ？
ロボットごとの動き方をモデルの重みの再学習なしに扱う操作支援の設計に役立つ可能性がある。評価対象外のロボットでの性能は分からない。
この研究の面白いところ
作業外の1回の動作から不完全な身体モデルを作り、実行中に修正し、古い推定に依存する知識を再確認する仕組みを用いた。
どこまで分かった？
4課題・32試行の実機評価で、初期化時の完了率は75％対25％だった。より多い課題や長期間の運用での結果は要旨にはない。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
汎用の視覚言語モデルは作業の目標を理解できても、特定のロボットの動きや機能部品がどう目的の効果を生むかは知らない。本研究はKnowBodyという操作支援の枠組みを提案する。モデルの重みを固定したまま、行動に関わる体の各部分の関係を明示し、問い合わせ可能で、後から修正できるようにする。目的の作業とは別の1回の動作軌跡から作った不完全な身体モデルが、行動の選択と過去のやり取りの解釈を導く。新たな証拠でモデルを改善し、修正前の身体の推定に依存する知識は再利用する前に確認し直す。 4種類の実機ロボット課題で、予算を固定した32回の試行を行ったところ、初期化したKnowBodyの完了率は75％で、標準の操作支援の25％を上回った。両手法が成功した課題でも、KnowBodyの成功した試行では、計画器を回す回数が少なかった。更新を持続させる場合、記録された最初の成功から5回目の成功までに、計画器の反復回数は29～53％減った。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-22（UTC）
- 最新改訂
- 2026-09-22 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-22 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
A general-purpose vision-language model can understand a task goal without knowing how a particular robot's motion and functional parts produce the intended effect. We introduce KnowBody, a harness that makes these action-relevant body relations explicit, queryable, and revisable while keeping the model weights frozen. Initialized from one off-task trajectory, a partial body model guides action selection and the interpretation of past interactions. New evidence refines the model, and knowledge dependent on revised body estimates is rechecked before reuse. Across 32 fixed-budget trials on four real-robot tasks, initialized KnowBody achieves 75% completion versus 25% for the native harness and requires fewer planner rounds on successful trials in tasks completed by both. With persistent updates enabled, planner rounds decrease by 29-53% from the first to the fifth recorded success.
著者のコメント
19 pages, 5 figures, 7 tables. Project page: https://loule0-0.github.io/KnowBody/
arXiv ID: 2609.28530 ／ 要約の誤りについて