画像と言語を扱うモデルの物体幻覚を生む回路を特定
Where Hallucinations Live: A Cross-Architecture Circuit in VQ-Tokenized Vision-Language Models
この論文をやさしく読む
ひとことで言うと
画像を特殊なトークンに変換する視覚言語モデルが、画像にない物体を答える原因となる初期層の回路を調べています。
何に役立つ？
物体の誤認を減らすモデル設計や診断に役立つ可能性があります。要旨では自由形式の生成における評価指標の改善が報告されています。
この研究の面白いところ
25モデルの比較と一つの構造変更により、ベクトル量子化と初期層の注意経路の関係を切り分けています。
どこまで分かった？
対象はVQで画像をトークン化する統合型VLMと記載された評価設定です。二値回答では比較手法のDoLAが優れており、提案介入がすべての指標で勝るわけではありません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
ベクトル量子化（VQ）コードブックを通じて画像をトークン化する統合型の視覚言語モデル（VLM）は、画像に基づいて「はい・いいえ」で答える評価で、存在しない物体をしばしば答える。しかし、既存の生成時の修正法は、これを一般的な確信度のずれとして扱い、モデル構造に基づく説明を与えていない。 本研究は、8種類の大規模言語モデル系統にまたがる25モデルで活性化パッチングを行い、VQトークン化VLMに共通する初期層L₀の注意の振り分け回路を特定した。また、この回路を持つモデルと持たないモデルを区別する三つの判定段階を提案した。この診断は、自然に構成された統合VQ型VLMの5モデルと、誘導した派生型5モデルの計10モデルを陽性とし、残り15モデルを陰性と判定する。LLaVA-1.6のCLIP＋MLPをVQ＋Linearへ置き換える単一の構造変更で回路が導入される一方、同じデータと計算量に合わせたMLPの対照構成では導入されなかった。これにより病的な信号の原因をベクトル量子化に絞り込み、それを運ぶ経路は基盤モデルに元から備わっていることを示す。 調整済みのVCDとDoLAとの比較では、二値回答の確信度調整ではDoLAが勝った。しかし、自由形式の生成で物体の幻覚を減らしたのはL₀の除去だけで、CHAIRᵢは相対的に31％低下した。調整済みのDoLAとVCDでは変わらないか、悪化した。これらの結果は、統合型VQ VLMでの物体幻覚をモデル構造と事前学習に関わる性質として捉え直し、仕組みを考慮しない生成時の調整では再現できない、標的を絞った介入を示す。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-24（UTC）
- 最新改訂
- 2026-09-24 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-24 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Unified vision-language models (VLMs) that tokenize images through a vector-quantized (VQ) codebook routinely hallucinate objects on grounded yes/no benchmarks, yet existing decoding-time fixes treat this as generic miscalibration without an architectural account. Using activation patching across twenty-five models spanning eight LLM families, we identify an early-layer ($L_0$) attention routing circuit shared across VQ-tokenized VLMs and propose a three-gate diagnostic that distinguishes the models carrying it from those that do not. The diagnostic isolates ten positive models (five natural unified-VQ VLMs across three LLM families and five induced variants) and rejects the remaining fifteen. A single-variable architectural swap (LLaVA-1.6 CLIP+MLP $\rightarrow$ VQ+Linear) installs the circuit, while a matched-compute MLP control on identical data does not, isolating vector quantization as the source of the pathological signal; the routing pathway that carries it is one that the backbone already provides. Against tuned VCD and DoLA baselines, tuned DoLA wins on binary calibration, but \textbf{only $L_0$ ablation reduces object hallucination in open-ended generation} (CHAIR$_i$ reduces by $31\,\%$ relatively, whereas tuned DoLA and VCD leave it unchanged or worsen it). These results recast object hallucination in unified VQ VLMs as a property of architecture and pretraining, and yield a targeted intervention that mechanism-agnostic decoding cannot replicate.
著者のコメント
EMNLP 2026 | Project Page: https://shamanthak-hegde.github.io/where-hallucinations-live
arXiv ID: 2609.29048 ／ 要約の誤りについて