画像と言葉の推論を短い構造化記録にまとめるDRT
DRT: Dense Reasoning Trace for Efficient and Grounded Multimodal Reasoning
この論文をやさしく読む
ひとことで言うと
画像を見て考えるAIの推論を、長い文章ではなく、観察と判断を分けた短い構造化メモとして表現する方法です。
何に役立つ？
考えられる用途は、視覚的な根拠を保ったまま推論出力のトークン数を減らすことです。ベンチマークでは効率だけでなく正解率も改善しています。
この研究の面白いところ
単なる文章の短縮ではなく、途中の状態と論理的なつながりを明示する形式を学習します。参照記録の検証と、構造に応じた報酬を組み合わせている点が特徴です。
どこまで分かった？
5.5倍はトークン効率の改善であり、処理時間が5.5倍速くなったという記載ではありません。正解率の改善は1.3ポイントです。要旨には個別ベンチマークの条件や実時間の測定値はありません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
マルチモーダル大規模言語モデル（MLLM）は目覚ましく進歩しているが、主流の思考連鎖（CoT）の枠組みは依然として自然言語の表現空間にとどまっている。その結果、本質的に過剰な言語上の負担が生じ、情報が薄まり、視覚的根拠との結び付きが弱くなる。この課題に対し、本研究ではDense Reasoning Trace（DRT）を提案する。DRTは自然言語中心のCoTから離れ、推論をコンパクトな構造化記録として表現する枠組みである。この記録は、記号的な接続子を伴う簡潔な中間状態を含み、視覚的な観察と論理的な導出を切り分ける。 まず、DRTの推論方式をモデルに内在化させるDense Trace Initializationを導入し、視覚的根拠を保ちながらトークン効率を大幅に改善する。さらに、記録内の論理関係をモデルが忠実に捉えられるよう、Trace-Grounded Reinforcement Learningの枠組みを提案する。これは3つの観点による検証処理系を通じて参照記録を構築し、構造化された報酬を持つTrace-Grounded GRPOを用いる。これにより、幻覚を減らし、論理的根拠との結び付きを強めた、簡潔なDRT形式の記録を生成するようモデルを促す。 難度の高い推論ベンチマークでの広範な実験では、DRTはQwen3-VLベースラインに対してトークン効率を5.5倍に改善し、正解率も1.3ポイント向上させた。これらの知見は、複雑なマルチモーダル推論に冗長な自然言語の記録は必須ではない可能性を示し、次世代MLLMに向けたより効率的な道を開く。コードとデータは https://github.com/HIT-leaderone/DRT で公開している。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-18（UTC）
- 最新改訂
- 2026-09-18 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-18 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Despite the remarkable progress in Multimodal Large Language Models (MLLMs), prevailing Chain-of-Thought (CoT) paradigms remain confined to the natural-language expression space. Consequently, they inherently incur excessive linguistic overhead, leading to information dilution and weak visual grounding. To address this challenge, we propose Dense Reasoning Trace (DRT), a paradigm that departs from natural-language-centered CoT by expressing reasoning as compact structured traces, which include concise intermediate states with symbolic connectors and disentangle visual observations from logical deductions. First, we introduce the Dense Trace Initialization to internalize the DRT reasoning mode into the model, substantially improving token efficiency while preserving visual evidence. To further enable the model to faithfully capture the logical relations within traces, we propose the Trace-Grounded Reinforcement Learning framework, which builds reference traces through a tri-perspective verification pipeline and employs Trace-Grounded GRPO with structured rewards, encouraging the model to generate concise DRT-style traces with reduced hallucination and stronger logical grounding. Extensive experiments on challenging reasoning benchmarks show that DRT achieves 5.5$\times$ token efficiency improvement while improving 1.3 accuracy points over the Qwen3-VL baseline. These findings suggest that complex multimodal reasoning may not require verbose natural-language traces, opening a more efficient path for next-generation MLLMs. Our code and data are available at: https://github.com/HIT-leaderone/DRT
arXiv ID: 2609.21675 ／ 要約の誤りについて