arXiv論文メモ
新着一覧
cs.CV · 査読状況未確認

画像領域のまとまりを使って未知物体の検出を改善する

SAFe: Segment-guided Aggregation of Feature Densities for Anomaly-aware Segmentation

Anja Delić, Jurica Runtas, Marin Oršić, Ivan Marković, Ivan Petrović

この論文をやさしく読む

ひとことで言うと

画像の各点が見慣れないかを判定するだけでなく、物体らしい領域にまとめて、未知の物体を検出する方法です。異常とされた物体同士を似たものごとに分ける処理も含みます。

何に役立つ?

考えられる用途は、自律システムの画像認識で、学習にない物体を見落としたり、細かな誤検出を出したりする問題の軽減です。報告された実証は複数ベンチマークでの性能です。

この研究の面白いところ

全体の意味を捉えるTransformer特徴と、局所の細部を捉える畳み込み特徴を組み合わせます。さらに、密度推定とは別の領域単位の後処理で、空間的なまとまりを与えます。

どこまで分かった?

要旨には各指標の具体値や実環境での安全性評価はありません。再学習不要という説明は後処理による個体単位検出についてであり、密度推定用の軽量フローは学習します。異常物体をクラスタに分けることと、未知カテゴリの名前を正しく特定することは別です。

v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。

アブストラクトの日本語訳

視覚的な領域分割システムは、実環境で運用されると学習分布の外にある物体に遭遇する。このことは、知覚段階で場面の解析に依存する自律システムの信頼性を妨げる。近年の多くの手法は、自己教師あり基盤モデルを使って密度推定器を学習し、異常な画像領域で低い尤度を出すことでこの問題に対処する。有望ではあるが、これらの手法は特徴の意味表現が不十分だったり、空間的一貫性を欠いたりし、そのどちらも重要な後段の判断を損なう。 本研究では、自己教師あり表現に対するクラス条件付き密度推定に基づく生成的手法SAFeで、この問題に対処する。SAFeは軽量な正規化フローを学習し、固定したDINOv3特徴に対するクラス条件付きの正規化された尤度を推定する。Transformer特徴からの密度推定と、複数スケールの畳み込み特徴に対する密度スコアを組み合わせ、全体的な意味と局所的な細部の両方を捉える。 SAM3に基づく、個別手法に依存しない後処理を導入する。これは各位置の尤度を空間的に一貫した領域へ結び付け、偽陽性を抑えるとともに、再学習なしで物体個体単位の異常検出を可能にする。さらに、この後処理は類似度に基づく凝集型クラスタリングにより、異常物体の中で新たなカテゴリを区別する。SAFeはPANIC、OoDIS、SMIYC ObstacleTrackで新たな最高性能を達成し、ISSUベンチマークでも高い性能を示す。

v1の要旨から自動生成。本文の精読・人による確認は未実施。

初稿
2026-09-21(UTC)
最新改訂
2026-09-21 · v1
査読・掲載
査読状況未確認
arXivで読むPDF

更新履歴

取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。

原文の要旨

Visual segmentation systems encounter objects outside their training distribution during real-world deployment, hindering reliable autonomous systems that depend on scene parsing in the perception stage. Many recent methods address this by using self-supervised foundation models to train density estimators that yield low likelihood in anomalous image regions. Although promising, these methods suffer from poor feature semantics or they lack spatial consistency, both of which undermine critical downstream decisions. We address this problem with~\method, a generative method based on class-conditional density estimation over self-supervised representations. SAFe trains lightweight normalizing flows that produce class-conditional normalized likelihood estimates over frozen DINOv3 features. We combine density estimates from transformer features with density scores over multi-scale convolutional features to capture both global semantics and local detail. We introduce a method-agnostic post-processing step based on SAM3 that connects per-location likelihoods into spatially coherent segments while suppressing false positives, and enables instance-level anomaly detection without retraining. The post processing further distinguishes novel categories among anomalous objects by a similarity-based agglomerative clustering scheme. SAFe sets a new state of the art on the PANIC, OoDIS, SMIYC ObstacleTrack with strong performance on the ISSU benchmark.

arXiv ID: 2609.24204 / 要約の誤りについて