複数人が仮想空間で人型ロボットの協調動作を収集
MATE: Multi-Agent Virtual Teleoperation Platform for Humanoid Collaboration Data Collection
この論文をやさしく読む
ひとことで言うと
離れた場所にいる人たちが仮想の人型ロボットを同時に操作し、受け渡しや共同運搬の学習データを集める仕組みです。
何に役立つ？
複数の高価な実機をそろえずに協調行動の実演を収集する用途が考えられます。研究では24.1時間、2500エピソードのデータを構築し、方策学習も評価しています。
この研究の面白いところ
共有物理環境でロボット同士と物体の相互作用を保ち、学習時には進行に重要な区間を優先します。仮想実演から実機への微調整なしの転移も報告しています。
どこまで分かった？
データ収集の中心は仮想環境です。要旨は実機への転移を述べていますが、すべての協調タスクを複数実機で再現したとは記していません。成功率や転移の詳しい条件も要旨にはありません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
人型ロボットが複雑な移動・物体操作や協調の技能を獲得するには、多様な身体的経験が必要である。しかし、既存の人型ロボット向けデータ収集系は主に単体に焦点を当てており、実機による複数ロボットの協調は、高価な機材、専用空間、繰り返しの初期化を要するため、規模を拡大しにくい。 本研究では、人型ロボットの協調データを収集する複数エージェント仮想遠隔操作プラットフォームMATEを導入する。地理的に離れた複数の操作者が、共有された物理シミュレーション環境で、人型ロボットの全身を同時に操作できる。MATEは、人型ロボット、物体、環境の間で物理的に結びついた相互作用を保ちながら、複数の実機や同じ場所での操作を不要にする。 MATEを用い、2500件の共同エピソードにわたる24.1時間の協調行動を含む、複数人型ロボットの協調データセットを構築する。対象は物体の受け渡し、リレー配送、環境との相互作用、協調運搬などを含む五つの長期タスクである。相互作用の多いこれらの実演からの学習を改善するため、実行整合型相互作用サンプリング戦略EAISを導入する。これは実行に整合した先頭区間内でサンプリング用の信号を計算し、タスクを進める行動や相互作用に重要な行動を優先する。 多様な協調タスクで、代表的な模倣学習方策と視覚・言語・行動方策を使ってMATEを評価する。実験は、効率的なデータ収集、有効な方策学習、および実世界で微調整することなく、仮想実演から実機の人型ロボットへのゼロショット転移が可能であることを示す。プロジェクトページ：https://yerik-yu.github.io/MATE/
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-22（UTC）
- 最新改訂
- 2026-09-22 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-22 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Humanoid robots require diverse embodied experiences to acquire complex loco-manipulation and collaborative skills. However, existing humanoid data pipelines primarily focus on individual agents, while physical multi-robot collaboration remains difficult to scale due to costly hardware, dedicated spaces, and repeated resets. In this work, we introduce MATE, a Multi-Agent virtual TEleoperation platform for humanoid collaboration data collection that enables multiple geographically distributed operators to simultaneously control whole-body humanoids in a shared physics-based environment. MATE removes the need for multiple physical robots and co-located operation while preserving physically coupled interactions among humanoids, objects, and environments. Using MATE, we construct a multi-humanoid collaboration dataset comprising 24.1 hours of coordinated behavior across 2,500 joint episodes and five long-horizon tasks, including object handover, relay delivery, environment interaction, and cooperative transport. To improve learning from these interaction-rich demonstrations, we introduce EAIS, an Execution-Aligned Interaction Sampling strategy that computes sampling signals within an execution-aligned prefix and prioritizes task-progressing and interaction-critical behaviors. We evaluate MATE with representative imitation learning and vision-language-action policies across diverse collaboration tasks. Experiments demonstrate efficient data collection, effective policy learning, and zero-shot transfer from virtual demonstrations to a physical humanoid without real-world fine-tuning. Project page: https://yerik-yu.github.io/MATE/
arXiv ID: 2609.26520 ／ 要約の誤りについて