次の着地点を手掛かりに過去の深度画像を探して歩く人型ロボット
FootQuery: Future-Touchdown-Guided Retrieval from Depth History for Perceptive Humanoid Locomotion
この論文をやさしく読む
ひとことで言うと
次に足を置く場所を予測し、その場所が以前に見えていた深度画像を探して歩く人型ロボットの方法です。
何に役立つ？
今のカメラ画像では足場が隠れている場合でも、過去の観測を歩行に使えます。シミュレーションに加え、Unitree G1で複数種類の障害を含む経路を連続して歩く実験があります。
この研究の面白いところ
視覚の履歴を一律に記憶するだけでなく、左右それぞれの足の着地予測と不確実性を手掛かりに必要な部分を取り出します。学習では実際の接触位置を過去画像に戻して検索を教えます。
どこまで分かった？
シミュレーションの構成要素比較と、G1での実世界実験が報告されています。要旨には成功率や転倒率の数値はなく、任意の地形・機体での安全性を保証する結果ではありません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
複雑な地形を歩く人型ロボットは、着地時には見えなくなっているかもしれない足場を予測する必要がある。カメラの視野の狭さや自分の身体による遮蔽のため、以前の観測から関連する地形情報を取り出すことが必要になる。本研究では、各足の次の着地点の予測を使って深度画像の履歴を照会する、知覚に基づく歩行フレームワークFootQueryを提示する。 方策は身体内部の状態情報から着地点とその不確実性を予測し、これらの分布と足ごとの特徴を使って、疎にサンプリングした過去の深度画像を照会する。学習中には、実際に生じた接触を過去の画像へ投影し、その接触箇所が見えていた領域から情報を取り出すよう教師信号を与える。取り出した足ごとの特徴を大域的な視覚記憶と融合し、制御行動を生成する。 段階的な力補助のカリキュラムが学習初期の探索を支え、接触イベントと整合した踏み面中央線への誘導が、階段での協調した足の接触を促す。運用時に必要なのは身体内部の状態情報と搭載した深度カメラの画像だけである。シミュレーションでは、完全なフレームワークが、試験した中で最も難しい階段、隙間、台の課題において、構成要素を除いた各比較構成を上回る。Unitree G1を使う実世界実験では、単一の方策により、屋外の階段や、階段の上り下り、台、隙間を組み合わせた屋内経路を連続して通過できることを示す。これらの結果は、予測される接触を中心に視覚履歴を整理することが、知覚に基づく人型ロボット歩行に役立つことを支持する。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-18（UTC）
- 最新改訂
- 2026-09-18 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-18 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Humanoid locomotion over complex terrain requires anticipating footholds that may no longer be visible at touchdown. Limited camera coverage and self-occlusion make it necessary to retrieve relevant terrain information from earlier observations. We present FootQuery, a perceptive locomotion framework that queries depth history using each foot's predicted next touchdown. The policy predicts touchdown locations and uncertainty from proprioception and uses these distributions, together with per-foot features, to query sparsely sampled historical depth frames. During training, realized contacts are projected into historical images to supervise retrieval at the regions where those contacts were visible. The retrieved per-foot features are fused with global visual memory to generate control actions. A progressive force-assistance curriculum supports early exploration, while event-consistent tread-midline shaping encourages coordinated stair contacts. Deployment requires only proprioception and onboard depth images. In simulation, the complete framework outperforms its component ablations on the most challenging tested stairs, gaps, and platforms. Real-world experiments on a Unitree G1 demonstrate continuous traversal with a single policy across outdoor stairs and indoor routes combining stair ascent and descent, platforms, and gaps. These results support organizing visual history around anticipated contacts for perceptive humanoid locomotion.
著者のコメント
9 pages, 11 figures
arXiv ID: 2609.21447 ／ 要約の誤りについて