文章の指示から四脚ロボットの見本動作を生成する
MimicAgent: Quadruped Skills via Prompt-to-Trajectory Generation
この論文をやさしく読む
ひとことで言うと
四脚ロボットにさせたい動きを文章で伝え、AIが作った見本軌道を手掛かりに強化学習します。
何に役立つ？
動作ごとに報酬関数を細かく調整する負担を減らし、参照データが不足する四脚の技能学習を支援する用途があります。
この研究の面白いところ
報酬をAIに書かせる代わりに、まず見本の動きを作らせるという設計の転換です。粗い軌道から学習方策を作ります。
どこまで分かった？
87%は指示に意味的に合う参照軌道が得られた割合であり、実機での技能成功率ではありません。要旨には実機試行数や技能別の成功率は示されていません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
動的な四脚ロボット技能を学習するための、指示から軌道を生成する枠組みMimicAgentを提示する。四脚ロボットの方策の学習では報酬設計が広く使われるが、できあがった報酬の地形をうまくたどることは難しく、何時間もの、いわば「大学院生による手作業の最適化」を要する。EurekaはLLMによる報酬設計の自動化を試みているが、多様な技能や身体形態への汎化に苦労することが分かった。 中心的な観察は、人間にとって、ひいてはLLMにとっても、報酬関数を整えるより、参照動作を作る方がはるかに容易だということである。この仮説は、大規模なモーションキャプチャーデータを参照として歩行方策を学ぶ、人型ロボット向けの例示誘導型強化学習の成功に着想を得た。人型とは異なり、四脚ロボットにはこのような参照動作データが不足している。 そこで、技能の指示を与えるとコーディングエージェントが四脚ロボットの参照軌道を生成する実行枠組みMimicAgentを提案する。得られた粗い参照軌道を使って例示誘導型の強化学習方策を学び、シミュレーションと実世界に展開できるようにする。特に、本枠組みの中でClaude Fable 5.1に指示した場合、87%の指示から、意味的に要求と合う参照軌道が得られることが分かった。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-21（UTC）
- 最新改訂
- 2026-09-21 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-21 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
We present MimicAgent, a prompt-to-trajectory generation framework for learning dynamic quadruped skills. Although reward shaping is extensively used when training quadruped policies, navigating the resulting reward landscape is notoriously difficult, requiring hours of "graduate student descent". Eureka attempts to automate reward design with LLMs, but we find that it struggles to generalize across diverse skills and morphologies. Our key observation is that it is far easier for a human - and by association, an LLM - to generate reference motions than to shape reward functions. Our hypothesis is motivated by the success of example-guided RL for humanoids, which exploits large-scale motion capture datasets as references for training locomotion policies. Unlike humanoids, quadrupeds lack such reference motion data. Towards this end, we propose MimicAgent, an agentic harness that, given a skill prompt, generates quadruped reference trajectories with coding agents. These coarse reference trajectories are then used to train example-guided RL policies that are deployable in simulation and in the real-world. Notably, we find that when prompting Claude Fable 5.1 within our agentic harness, 87% of prompts yield semantically aligned reference trajectories.
著者のコメント
Project Page: https://luckykantnayak.github.io/mimic-agent/
arXiv ID: 2609.24145 ／ 要約の誤りについて