arXiv論文メモ
新着一覧
cs.CV / cs.RO · 査読状況未確認

再訪地点の照合で長距離3D再構成のずれを抑える

CLoSeR: Closing the Loop for Long-Context Streaming Reconstruction

Moyang Li, Zihan Zhu, Wei Zhang, Marc Pollefeys and Daniel Barath

この論文をやさしく読む

ひとことで言うと

長い移動映像から3D地図を作る際、以前通った場所を見つけて位置関係を補正し、蓄積したずれを減らします。

何に役立つ?

考えられる用途は、長距離の映像から整合した3D地図や空間モデルを作ることです。要旨ではキロメートル規模の系列での再構成結果が報告されています。

この研究の面白いところ

基盤モデルがスケールを一貫して出力する性質を利用し、拡大縮小まで扱う最適化ではなく、回転と並進のSE(3)で姿勢を最適化しています。

どこまで分かった?

採用した基盤モデルのスケール整合性を利用する設計です。要旨にはドリフトの数値や処理時間が示されていないため、あらゆる映像で誤差がゼロになるとまでは読み取れません。

v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。

アブストラクトの日本語訳

フィードフォワード型の基盤モデルは近年、優れた3次元再構成能力を示している。しかし既存モデルでは、長い文脈を持つストリーミング再構成において誤差が蓄積し、大きな追跡ドリフトが生じる。本論文では、ストリーミング再構成の基盤モデルでループ閉じ込みを再検討し、正確でドリフトのないキロメートル規模の再構成を可能にする。 具体的には、大域的な記述子の検索を通じてループ候補を検出し、ループを条件としたウィンドウを構築して、再訪したフレーム間の相対姿勢を推定する。採用したストリーミング再構成の基盤モデルが大域的に整合したスケールを生成するという観察に基づき、逐次的な制約とループ閉じ込みの制約を用いて、全フレームの姿勢をSE(3)多様体上で最適化する。これにより、先行研究で用いられたSim(3)や、より高次元のSL(4)多様体上の姿勢グラフ最適化を避ける。広範な実験により、本手法はキロメートル規模の系列でドリフトを低減し、一貫した幾何形状を生成し、最先端手法を大きく上回ることが示された。コードはhttps://github.com/MoyangLi00/CLoSeR.gitで公開されている。

v1の要旨から自動生成。本文の精読・人による確認は未実施。

初稿
2026-10-01(UTC)
最新改訂
2026-10-01 · v1
査読・掲載
査読状況未確認
arXivで読むPDF

更新履歴

取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。

原文の要旨

Feedforward foundation models have recently shown remarkable 3D reconstruction capabilities. However, existing models exhibit large tracking drift in long-context streaming reconstruction due to error accumulation. In this paper, we revisit loop closure with streaming reconstruction foundation models to enable accurate, drift-free, kilometer-scale reconstruction. Specifically, our method detects loop candidates through global descriptor retrieval, and constructs loop-conditioned windows to estimate the relative poses between looped frames. Given the observation that our adopted streaming reconstruction backbone produces a globally consistent scale, we optimize all frame poses on the SE(3) manifold with sequential and loop closure constraints, avoiding the pose graph optimization on the Sim(3) or higher-dimensional SL(4) manifolds employed in prior works. Extensive experiments show that our method reduces drift and produces consistent geometry on kilometer-scale sequences, significantly outperforming the state of the art. Code is available at https://github.com/MoyangLi00/CLoSeR.git.

著者のコメント

Authors contributed equally to this work. Author order is interchangeable

arXiv ID: 2610.01927 / 要約の誤りについて