arXiv論文メモ
新着一覧
cs.CV / cs.RO · 査読状況未確認

画像対応点の信頼度を分けてカメラの移動を推定

SFVO: Decoupled Confidence-Guided Stereo-Flow Visual Odometry with Bidirectional PnP

Kai Zhang, Guoyang Zhao, and Jun Ma

この論文をやさしく読む

ひとことで言うと

左右のカメラ画像と時間をまたぐ画像の対応から、カメラがどれだけ動き、回転したかを推定する方法です。回転と移動で、頼りにする点の信頼度を分けます。

何に役立つ?

考えられる用途は、ロボットなどの移動量や姿勢の推定です。ステレオ画像が持つ実スケールの情報と、時間方向の動きの情報を組み合わせます。

この研究の面白いところ

姿勢を画像から直接出すのではなく、学習した対応点を幾何学へ接続しています。同じ点でも回転と並進への役立ち方が異なることに合わせ、信頼度を分離する点が特徴です。

どこまで分かった?

要旨は屋内外のデータセット評価を報告していますが、具体的な誤差、速度、計算資源は示していません。コードも要旨時点では公開予定であり、ここでは公開済みとは確認していません。

v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。

アブストラクトの日本語訳

深層学習に基づく視覚オドメトリ(VO)は大きく進歩しているが、既存手法の多くは単眼方式を対象としており、実際の大きさの尺度が一意に決まらないという問題がある。ステレオVOは本来、実スケールを与えられるが、計算コストの高さとモデル化の複雑さから、深層学習VOでは研究が比較的少ない。近年、ステレオマッチングとオプティカルフロー推定の進歩により、密な画像対応はますます正確で信頼できるものになっている。しかし、両者の相補的な幾何情報は、VOに十分活用されていない。 本論文では、事前学習済みのステレオマッチングモデルとオプティカルフローモデルを直接基盤とする、画像対応に駆動されるステレオVOの枠組みSFVOを提案する。SFVOはこれらの事前学習済みモデルを用いて、左右画像間と時間方向の対応を推定する。画像から直接姿勢を学習する代わりに、学習によって得た対応を幾何制約へ変換し、どの点を信頼できるかを予測する。 画像対応に基づく幾何制約の信頼性を高めるため、回転と並進で別々の信頼度マップを導入する。この設計により、画像対応の特性と6自由度変換の特性をよりよく整合させる。屋外および屋内のデータセットでの広範な実験により、SFVOが高い汎化能力を備え、頑健かつ正確に姿勢を推定することを示す。コードは公開予定である。

v1の要旨から自動生成。本文の精読・人による確認は未実施。

初稿
2026-09-18(UTC)
最新改訂
2026-09-18 · v1
査読・掲載
査読状況未確認
arXivで読むPDF

更新履歴

取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。

原文の要旨

Deep learning-based visual odometry (VO) has achieved significant progress, yet most existing methods focus on a monocular approach, which suffers from scale ambiguity. Stereo VO provides real metric by its nature, but remains less studied in deep learning VO due to its high computational cost and modeling complexity. Recent advances in stereo matching and optical flow estimation have made dense visual correspondence increasingly accurate and reliable, but their complementary geometric information has not been fully exploited for VO. In this paper, we present SFVO, a correspondence-driven stereo VO framework that directly builds upon pretrained stereo matching and optical flow models. SFVO exploits pretrained stereo matching and optical flow models to estimate stereo and temporal correspondences. Instead of learning pose directly from images, SFVO maps learned correspondences into geometric constraints and predicts which points are trustworthy. To improve the reliability of visual correspondence-based geometric constraints, we introduce decoupled confidence maps for rotation and translation. This design better aligns the characteristics of visual correspondence and 6-DoF transformations. Extensive experiments on outdoor and indoor datasets demonstrate that SFVO achieves robust and accurate pose estimation with strong generalization capability. The code will be released.

arXiv ID: 2609.21754 / 要約の誤りについて