脳波の発生源と応答ごとの信頼性を使い画像を検索
Adaptive Cortically Constrained EEG-Vision Alignment for Zero-Shot Brain-to-Image Retrieval
この論文をやさしく読む
ひとことで言うと
頭皮で測った脳波を脳領域ごとの表現に再構成し、応答の信頼性に合わせて学習の手がかりを調整して、見ていた画像を候補から探します。
何に役立つ？
EEG と画像特徴の対応付けで、信号の混ざり合いや応答ごとのばらつきを扱うための設計に役立ちます。
この研究の面白いところ
センサー位置の情報をそのまま使うだけでなく、関心領域の発生源表現を用い、視覚側の教師信号も応答に応じて変えています。
どこまで分かった？
THINGS-EEG の200候補検索での結果です。要旨には正解率の具体値がなく、ROI の寄与分析はモデルの事後的解釈であって、脳の因果機構を直接証明するものではありません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
ゼロショットの脳信号からの画像検索には、雑音を含む EEG 応答と視覚表現の頑健な対応付けが必要である。既存の EEG と視覚の対応付け手法は、センサー空間で動作し、すべての応答に固定された視覚教師信号を適用することが多い。そのため、頭皮 EEG における空間的な混合と、応答ごとに異なる対応付けの信頼性の両方を無視している。 本研究では、ゼロショットの脳信号からの画像検索のために、皮質の制約を取り入れた適応的な EEG・視覚対応付け手法を提案する。EEG 応答を事前定義した関心領域（ROI）単位の発生源パターン表現へ再構成し、Neuro-ROI Attention Encoder で符号化する。応答ごとの変動に対処するため、モデルに基づく対応付けの証拠を用い、詳細度を制御した視覚目標に重みを付ける、証拠に基づく適応的な視覚教師信号の方策を導入する。THINGS-EEG では、200候補のゼロショット検索で高い性能を達成し、ROI 単位の寄与分析により、学習した発生源パターン表現を事後的に解釈できる。これらの結果は、皮質に制約された表現学習と適応的な教師信号が、ゼロショットの脳信号からの画像検索における EEG・視覚対応付けを共同で支援できることを示す。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-21（UTC）
- 最新改訂
- 2026-09-21 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-21 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Zero-shot brain-to-image retrieval requires robust alignment between noisy EEG responses and visual representations. Existing EEG-vision alignment methods often operate in sensor space and apply fixed visual supervision to all responses, ignoring both spatial mixing in scalp EEG and response-wise variability in alignment reliability. We propose an adaptive cortically constrained EEG-vision alignment method for zero-shot brain-to-image retrieval. The method reconstructs EEG responses into predefined ROI-level source-pattern representations and encodes them with a Neuro-ROI Attention Encoder. To handle response-wise variability, we introduce an evidence-based adaptive visual supervision strategy that weights detail-controlled visual targets using model-based alignment evidence. On THINGS-EEG, the proposed method achieves strong 200-way zero-shot retrieval performance, with ROI-level attribution providing post hoc interpretability of the learned source-pattern representations. These results show that cortically constrained representation learning and adaptive supervision can jointly support EEG-vision alignment for zero-shot brain-to-image retrieval.
arXiv ID: 2609.24109 ／ 要約の誤りについて