長い文書の質問応答でVLMの入力方法と検索を比較
An Empirical Study of VLM Pipelines for Long-Document QA
この論文をやさしく読む
ひとことで言うと
長い文書をVLMで質問応答する際、ページの渡し方、検索器、エージェント方式を比較した研究です。
何に役立つ？
長文書QAの処理方式を選ぶ際の参考になります。要旨ではモデルの大きさやベンチマークによってエージェント方式の効果が変わると示しています。
この研究の面白いところ
画像検索が強く、上位画像だけを送る方式は全ページ送信の約7分の1～4分の1のトークンで済みました。一方、質問ごとに最適方式を選ぶ余地は残りました。
どこまで分かった？
比較は二つのベンチマークと記載されたモデル・検索方式での結果です。質問ごとに最適方式を選ぶ理想的な選択器は実際に使える方式ではありません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
視覚言語モデル（VLM）は、文章にグラフ、表、図、複雑な配置が混ざる長い文書の処理で使われるようになっている。導入に当たっては、文書をモデルへどう与えるか、一部のページだけを送る場合にどの検索器を使うか、エージェントとして動かすか固定された処理手順にするかを選ぶ必要がある。本研究は、最先端のAPIモデルと公開重みモデルを使い、長文書の質問応答ベンチマーク二つでこれらを比較する。 第一に、ページ、表、図、検索などを呼び出せる六ツールのエージェントは、回答するVLMが十分大きくなって初めて効果を発揮した。MMLongBench-DocではQwen3.5-4Bと9Bで固定的なページ入力より劣り、27Bで同程度、Sonnet 4.5で上回った。LongDocURLではすべての回答モデルで固定入力と同等以上だった。最も強い固定方式に対する優位は、MMLongBench-Docで最先端モデルを回答に使った場合に最も明確で、LongDocURLでは測定の揺らぎの範囲に縮まった。第二に、検索器の個別の方式より、画像とテキストのどちらを検索するかが重要だった。最も強い画像検索器は最も強いテキスト方式を上回り、テキスト側では既製の単一のcross-encoderによる再順位付けが、はるかに重い複数段階のLLM方式とほぼ同等だった。上位k枚の画像を検索して送る方式は、組み合わせたすべての回答モデルでトークン効率が最も高く、全ページ送信の約7分の1から4分の1のトークンで済んだ。第三に、三つの強い処理方式は異なる質問に正解し、質問ごとに最適方式を選べる理想的な選択器は単一の最良方式より約13ポイント高い性能を得たが、根拠の種類で方式を振り分けても、その差はほとんど埋まらなかった。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-24（UTC）
- 最新改訂
- 2026-09-24 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-24 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Vision-Language Models (VLMs) are increasingly used for long-document processing, where the inputs combine text with charts, tables, figures, and complex layouts. Deploying them means choosing how to feed the document to the model, which retriever to use when only a subset of pages is sent, and whether to run the model agentically or as a static pipeline. We study these choices on two long-document QA benchmarks with both frontier API and open-weight VLMs. First, on MMLongBench-Doc our six-tool agent with page, table, figure, and search calls pays off only once the answering VLM is large enough: with Qwen3.5-4B and 9B it trails static page input, with Qwen3.5-27B it draws level, and with Sonnet 4.5 it leads. On LongDocURL it is level with or ahead of static input at every reader. Its lead over the strongest static pipeline is clearest with the frontier reader on MMLongBench-Doc and narrows to within noise on LongDocURL. Second, retrieval modality matters more than the specific retriever: the strongest image retriever leads the strongest text pipeline, and on the text side a single off-the-shelf cross-encoder rerank essentially matches a much heavier multi-stage LLM pipeline. Top-k image retrieval is also the most token-efficient input at every reader we paired it with, at roughly a seventh to a quarter of the tokens of sending every page. Third, cutting across all three choices, three of our strongest pipelines succeed on different questions, and an oracle that picks the best pipeline per question gains roughly thirteen points over the best single pipeline, though evidence-type routing recovers almost none of it.
著者のコメント
22 pages. EMNLP 2026 Industry Track
arXiv ID: 2609.29933 ／ 要約の誤りについて