将来状態の予測で人型ロボットの動きを誘導するPredActor
PredActor: Predictive Action Diffusion for Steerable Onboard Humanoid Control
この論文をやさしく読む
ひとことで言うと
人型ロボットが自分のセンサー情報から次の行動と将来の姿勢を一緒に予測し、文章や操作入力に沿って動く制御方法です。
何に役立つ？
外部で全身状態を推定せず、機上計算で動作を誘導する用途が考えられます。Jetson Orin NXの処理時間とUnitree G1での実装が、機上運用の具体的な根拠として示されています。
この研究の面白いところ
将来状態は目標に合わせて動きを調整するために使い、ロボットには生成した行動を直接実行させます。言語による振る舞いの選択と、その場の目標への誘導を同じ方策で組み合わせています。
どこまで分かった？
15地点への到達と0.580のテキスト検索スコアはシミュレーションの結果です。処理時間の95パーセンタイルが20 ms未満でも、全実行が必ず周期内に終わる保証ではありません。要旨には実機評価の試行数は示されていません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
拡散モデルは柔軟な動作生成を可能にするが、その柔軟性を、フィードバックに応じて反応する人型ロボット制御に結び付けることは難しい。階層型システムでは参照動作を通して動きを誘導するが、その参照が別の追従制御器の能力を超える場合があり、姿勢の回復や物理的な実行の多くは追従制御器に委ねられる。行動だけを生成する拡散モデルは行動を直接出力する一方、実行時の動作目標に利用できる明示的な将来状態の軌道を持たない。状態と行動を同時に生成する拡散モデルはこの表現を備えるが、代表的な制御器は通常は得られない全身状態に依存することが多く、学習した振る舞いの選択と実行時の動作誘導を支える機能は、依然として分散している。 本研究では、これらの相補的な誘導機能を、固有感覚の観測を用いて直接実行される1つの方策にまとめた、予測型の行動拡散方策PredActorを提案する。固有感覚の履歴と任意のタスク文脈を条件として、実行可能な行動と内部の将来状態軌道を同時に生成する。分類器不要ガイダンスはテキストを条件とする振る舞いを強め、分類器ガイダンスは予測状態を実行時の目標へ誘導する。実行するのは行動だけであり、独立した参照動作の追従制御器や、外部で推定された全身状態を方策の入力として使わない。 シミュレーションでは、PredActorは15個すべての目的地点に到達し、テキスト検索スコアは0.580となった。条件付き行動拡散の0.373を上回り、観測された外乱への耐性は同程度だった。この誘導付き方策を機上で実用的に動かすため、ローリング方式のノイズ除去と、計算内容を保持する実行時最適化を用いた。Jetson Orin NXでコールバック全体の処理時間は中央値16.790 ms、95パーセンタイル19.383 msとなり、いずれも20 msの制御周期を下回った。PredActorをUnitree G1に実装し、シミュレーションと実機での評価により、テキスト条件付き動作、外乱への応答、ジョイスティック操作、意味的な補間を示す。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-21（UTC）
- 最新改訂
- 2026-09-21 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-21 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Diffusion models offer flexible motion generation, but translating this flexibility into feedback-responsive humanoid control remains challenging. Hierarchical systems steer motion through references that may exceed a separate tracker's capabilities, leaving recovery and physical execution largely to the tracker. Action-only diffusion generates actions directly but lacks an explicit future-state trajectory for test-time motion objectives. Joint state-action diffusion provides this representation, yet representative controllers often depend on privileged full-body states, and support for learned behavior selection and test-time motion steering remains fragmented. We present PredActor, a predictive action diffusion policy that brings these complementary steering capabilities into one directly executed policy using proprioceptive observations. Conditioned on proprioceptive history and optional task context, PredActor jointly generates executable actions and an internal future-state trajectory. Classifier-free guidance strengthens text-conditioned behavior, while classifier guidance steers predicted states toward test-time objectives. Only actions are executed, without a separate motion-reference tracker or externally estimated full-body states as policy inputs. In simulation, PredActor reaches all 15 destination targets and achieves a text retrieval score of 0.580, compared with 0.373 for conditional action diffusion, with similar observed disturbance survival. To make this guided policy practical onboard, rolling denoising and computation-preserving runtime optimizations reduce the complete callback to 16.790 ms median and 19.383 ms p95 on a Jetson Orin NX, both below the 20 ms control period. We deploy PredActor on a Unitree G1; evaluations across simulation and physical hardware demonstrate text-conditioned motion, disturbance response, joystick control, and semantic interpolation.
著者のコメント
Project page: https://masteryip.github.io/predactor.github.io/
arXiv ID: 2609.24840 ／ 要約の誤りについて