画像と点群の位置合わせをガウス描画でつなぐGRIP
GRIP: Gaussian Rendering as a Cross-Modal Bridge for Image-to-Point Cloud Registration
この論文をやさしく読む
ひとことで言うと
二次元画像と三次元点群の特徴を同じ画像面にそろえ、両者の位置関係を詳しく推定する手法。
何に役立つ？
画像と点群を使う位置合わせで、最初の大まかな姿勢から対応点と姿勢を改良する際に役立つと考えられる。
この研究の面白いところ
三次元点の特徴をガウス描画で二次元格子へ投影し、画像特徴と画素単位で融合する。
どこまで分かった？
評価はRGB-D Scenes V2と7 Scenesでの実験。要旨に具体的な再現率や他環境での性能はない。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
本論文は、画素と点の対応付けおよび二次元画像と三次元点群の位置合わせに向けた、姿勢条件付きの改良手法GRIPを提案する。最初の粗い姿勢推定を受け、格子状の画像特徴と順序のない点群特徴の構造的な違いに対処するため、学習した三次元点の特徴をガウス特徴スプラッティングで画像格子に柔らかく描画する。描画された点由来の特徴マップを、画素位置に合わせたTransformerで画像特徴と融合し、視覚的な意味情報と幾何情報を共通の二次元表現で相互作用させる。改良した特徴を復号してより細かな解像度へ伝え、密な対応を推定したうえで最終的な姿勢を改良する。RGB-D Scenes V2と7 Scenesでの実験では、インライア比で最先端の結果を示し、位置合わせの再現率でも競争力があり、より厳しい評価しきい値で特に強かった。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-22（UTC）
- 最新改訂
- 2026-09-22 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-22 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
This paper introduces GRIP, a pose-conditioned refinement framework for pixel-to-point matching and 2D to 3D registration. Given an initial coarse pose estimate, GRIP addresses the structural mismatch between grid based image descriptors and unordered point cloud descriptors by softly rendering learned 3D point features onto the image grid through Gaussian feature splatting. The rendered point derived feature map is then fused with image features by a pixel aligned transformer, enabling visual semantic and geometric cues to interact in a shared 2D representation. The refined features are decoded and propagated to finer resolutions for dense correspondence estimation and final pose refinement. Experiments on RGB D Scenes V2 and 7 Scenes demonstrate state of the art inlier ratio and competitive registration recall, with stronger performance under stricter evaluation thresholds.
arXiv ID: 2609.25966 ／ 要約の誤りについて