arXiv論文メモ
新着一覧
cs.CV / cs.LG · 査読状況未確認

異なる車載システムが協力する認識技術PEARL

PEARL: A Lightweight Prompt-based Feature Interpreter Framework for Real-Time, Anonymous, and Heterogeneous Collaborative Perception

Armin Maleki and Hayder Radha

この論文をやさしく読む

ひとことで言うと

異なるセンサーやモデルを使う車両などが、設定情報を共有せずにリアルタイムで認識結果を協力させる手法。

何に役立つ?

考えられる用途は協調運転システムの参加者が途中で増える環境での認識処理。要旨での実証はシミュレーションと DAIR-V2X の実データによる評価である。

この研究の面白いところ

二種類の軽量変換器で新規参加者に適した認識用変換器を選び、平均1.67ミリ秒で選択しながら AP をランダム選択より8.2%向上させた。

どこまで分かった?

評価は要旨に列挙されたデータセットと条件での結果である。実際の道路での安全性や運用上の性能は要旨に記載されていない。

v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。

アブストラクトの日本語訳

協調認識に参加するシステムは、センサー、モデル構造、学習データが異なるため、特徴表現にずれが生じる。この異種性は新しい協調認識の仕組みにとって大きな課題である。従来法はモデルの再学習や参加者の種類ごとの変換器を使って特徴を共通空間へ揃えていたが、近隣参加者の構成情報を必要とし、リアルタイム運用への対応が十分ではなく、運用中に新たに加わる未知の参加者への一般化も弱い。本研究は、匿名性とリアルタイム性に対応した軽量なプロンプト埋め込みの枠組み PEARL を提案する。PEARL は複数の協調認識用変換器を持ち、新規参加者に使う変換器を、並列に学習した二つの軽量な複数スケール変換器でリアルタイムに選ぶ。一方の疎な検出用変換器 LWSD は協調検出に重要な領域を揃え、もう一方の密で領域に依存しない変換器 LWDDI は、素早い選択のために参加者に依存しない特徴を生成する。両者は低ランクの視覚プロンプトを用い、計算量、保存量、モデルの複雑さを抑える。シミュレーションデータ OPV2V、V2XSet と実データ DAIR-V2X での実験は、シミュレーションと実世界の協調運転場面の双方に一般化することを示した。リアルタイムのモデル選択は平均1.67ミリ秒で動作し、ランダム選択より平均適合率 AP を8.2%向上させた。従来型のオフライン学習条件でも、最先端の異種協調認識手法より AP が平均5.6%高く、通信費用を最大34.7分の1に減らした。参加者の構成やモデル設定を共有する必要がなく、専有または私的な情報の保護にもつながる。

v1の要旨から自動生成。本文の精読・人による確認は未実施。

初稿
2026-09-22(UTC)
最新改訂
2026-09-22 · v1
査読・掲載
査読状況未確認
arXivで読むPDF

更新履歴

取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。

原文の要旨

Heterogeneity across Collaborative Perception (CP) agents is a major challenge for emerging CP frameworks due to domain gaps from differing sensors, architectures, and training data. Prior works mitigate this challenge by aligning features in a unified space via model retraining or per-agent-type interpreters. These strategies (a) require access to neighbor configurations, (b) do not fully address real-time CP deployment, and (c) generalize poorly to unseen agents joining at run time. To overcome these challenges, we present PEARL, a Prompt-Embedding framework for Anonymous and Real-time Lightweight heterogeneous CP. PEARL supports multiple CP interpreters and selects one for a new-joining agent in real time using two lightweight, multi-scale interpreters trained in parallel: a sparse-detection (LWSD) interpreter that aligns salient regions for cooperative detection, and a dense, domain-invariant (LWDDI) interpreter that produces agent-invariant features for fast interpreter selection. Both interpreters use low-rank visual prompts to reduce computation, storage, and model complexity. Extensive experiments on simulated (OPV2V, V2XSet) and real (DAIR-V2X) datasets show that PEARL generalizes across simulated and real-world cooperative driving scenarios. Its real-time model-selection strategy yields an 8.2% Average Precision (AP) gain over a random-selection baseline while running in 1.67 ms on average. Although primarily designed for real-time CP, PEARL also outperforms state-of-the-art heterogeneous CP frameworks under traditional offline training by 5.6% AP on average while reducing communication cost by up to 34.7 times. Equally important, PEARL does not require sharing agents' configurations or model settings, thereby protecting information that may be proprietary or private. These results establish PEARL as a scalable and practical framework for heterogeneous collaborative perception.

著者のコメント

21 pages, 4 figures and 25 tables

arXiv ID: 2609.27123 / 要約の誤りについて