画像の重要領域に計算を集中させる視覚言語モデル
Region-Level Policy Optimization for Fine-grained MLLM Perception
この論文をやさしく読む
ひとことで言うと
画像のどこを見るかは粗く決め、選んだ場所だけ詳しく読むことで視覚言語モデルを効率化する方法です。
何に役立つ？
細かな視覚認識の精度を保ちつつ、画像トークンと処理費用を減らす設計に役立ちます。領域の位置探しと内容認識を分けます。
この研究の面白いところ
領域を消したときに答えの確率がどう変わるかで、軽量な領域提案器を強化学習します。領域の正解ラベルや推論軌跡なしで、答えに効く証拠を選びます。
どこまで分かった？
6ベンチマーク・4基盤モデルで評価し、約4分の1の視覚トークンで元モデルの最大予算時の精度を上回ったと報告しています。トークン削減率をそのまま実測時間の4倍高速化と読むことはできません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
マルチモーダル大規模言語モデル（MLLM）の細かな視覚認識は、一般に解像度を上げることで改善されるが、視覚トークンの増加は画像の符号化と、言語モデルのプリフィルのコストを膨らませる。本研究では、細かな認識を支える二つの操作、すなわち関心領域（RoI）の位置特定と、その内容の認識では、必要な解像度が異なることを示す。条件を制御した診断では、位置特定は内容認識より約3〜4倍強いトークン圧縮に耐える。この結果から、粗い画像で位置を特定し、選ばれた根拠領域に解像度を集中させる方針が導かれる。 MLLMで座標を復号する方法は、回答からエンドツーエンドで学習できるものの、問い合わせごとにモデル全体の処理が必要で、画像上の位置と内容を対応付ける能力にも依存する。モデルの注意から蒸留した軽量な領域提案ネットワークは高速だが、学習対象となる注意のノイズを引き継ぐ。また、提案ネットワークのRoIは離散的な領域選択を経て回答に影響するため、回答への忠実さをネットワークの教師信号にできない。 そこで、Vision-RL2と名付けた領域単位の強化学習によって、提案ネットワークを最適化する。まとまりのある領域を行動とみなし、固定したMLLMの読み取りモデルが、その領域を除いたときの回答尤度の変化に基づいて各領域を評価する。相補的な減算目的と加算目的によって、気を散らす領域提案を抑え、欠けた根拠を回復する。領域の注釈、応答のサンプリング、推論過程を使わず、予測器だけを更新する。改善された領域提案により、根拠領域を拡大し、背景トークンを除く疎な符号化も可能になる。 細かな認識を評価する6つのベンチマークと4種類のMLLM基盤モデルで、Vision-RL2はすべてのトークン予算において元モデルより精度を改善し、約4分の1の視覚トークンで、元モデルの最大予算時の精度を上回る。コードはhttps://github.com/YuHengsss/VisionRL2で公開されている。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-17（UTC）
- 最新改訂
- 2026-09-17 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-17 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Fine-grained visual perception in MLLMs is commonly improved by raising the resolution, but the added visual tokens inflate vision-encoding and language-model prefilling costs. We show that the two operations underlying fine-grained perception, localizing the region of interest (RoI) and recognizing its content, have different resolution requirements. In a controlled diagnostic, localization tolerates roughly 3 to 4 times stronger token compression than recognition, which motivates localizing from a coarse view and concentrating resolution on the selected evidence. Decoding coordinates with the MLLM can be trained end-to-end from answers, but costs a full model pass per query and depends on grounding ability. A lightweight proposal network distilled from the model's attention is fast, but inherits the noise of its attention targets. The RoI from the proposal network reaches the answer through a discrete region choice, so its faithfulness to the answer cannot supervise the network. We therefore optimize the proposal network with region-level reinforcement learning, which we call Vision-RL2. It treats coherent regions as actions, and a frozen MLLM reader scores each one by how its removal changes the answer likelihood. Complementary subtractive and additive objectives suppress distracting proposals and recover missing evidence, updating only the predictor without region annotations, response sampling, or reasoning trajectories. The refined proposal further enables a sparse encoding that magnifies evidence and excludes background tokens. Across six fine-grained benchmarks and four MLLM backbones, Vision-RL2 improves accuracy over the base model at every token budget and surpasses its largest-budget accuracy with about 4 times fewer visual tokens. Code is available at https://github.com/YuHengsss/VisionRL2 .
arXiv ID: 2609.19745 ／ 要約の誤りについて