1枚のRGB-D画像から場面を補完して物体を分離
CODA: Depth-Aligned Scene Completion and Object Decomposition from a Single RGB-D Image
この論文をやさしく読む
ひとことで言うと
1枚のRGB-D画像から密集した場面全体の3次元形状を補い、環境と動かせる物体を分ける方法。
何に役立つ？
部分的にしか見えない場面で、ロボットが物体や支持面の形状を把握する用途が考えられる。要旨で示された実証はデータセットでの再構成精度と模擬重力下の物体配置である。
この研究の面白いところ
物体を個別に復元する順番を逆にし、場面全体を作ってから分離する。観測点群とのずれを抑えるため、二つの3次元位置合わせ機構も組み込んでいる。
どこまで分かった？
評価はHomebrewedDBと独自データセットでの実験、および模擬重力下の指標について述べる。実環境でのロボット操作結果は要旨に記載されていない。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
物が密集した日常環境でロボットを安全に動かすには、部分的な観測から場面の形状を推定することがよく必要になる。2次元画像で物体を検出して個別に再構成する方法には、見落とした物体は再構成されない、二つの物体を一つとして検出すると融合してしまう、別々に再構成したメッシュが重なったり支持面に接しなかったりする、という問題がある。 そこでCODA（Complete Once, Decompose Afterward）という生成モデルを提案する。分割されていない1枚のRGB-D画像からまず場面全体の形状を再構成し、その後、表面を周囲の環境と動かせる物体に分ける。ただし、生成された形状は観測された部分的な点群からずれる可能性がある。このずれを減らすため、CODAは二つの明示的な3次元の位置合わせ機構を使い、見えない領域を補完しながら、再構成した形状を観測済みの表面と整合させる。 HomebrewedDBと独自の密集場面データセットでの実験では、物体を先に再構成する方法と場面全体を先に扱う方法の双方を比較対象として、再構成精度が高く、模擬重力下で元の位置にとどまる物体の割合も高かった。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-22（UTC）
- 最新改訂
- 2026-09-22 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-22 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Robots operating safely in cluttered everyday environments often need to infer scene geometry from partial observations. Methods that detect objects in 2D and reconstruct them independently struggle in such scenes: a missed object is never reconstructed, a merged detection can fuse two objects, and separately reconstructed meshes may overlap or fail to touch their supporting surfaces. We introduce CODA (Complete Once, Decompose Afterward), a generative model that instead reconstructs the complete scene geometry from a single unsegmented RGB-D image, then separates the surface into the surrounding environment and movable objects. Still, generated scene geometry can drift from the observed partial point cloud. To reduce this drift, CODA uses two explicit 3D grounding mechanisms to keep reconstructed geometry consistent with observed surfaces while completing unseen regions. Experiments on HomebrewedDB and our custom cluttered-scene dataset show more accurate reconstructions and a higher fraction of objects remaining in place under simulated gravity than both object-first and scene-first baselines.
著者のコメント
8 pages, 7 figures, 3 tables. Project page: https://dongwon-son.github.io/coda-project-page/
arXiv ID: 2609.25654 ／ 要約の誤りについて