推理小説の質問に知識グラフで答える小型言語モデル
Beyond Linear Context: Graph-Guided Evidence Navigation for Long-Novel Reasoning with a Local 9B Language Model
この論文をやさしく読む
ひとことで言うと
推理小説の長い内容に関する質問へ、小型言語モデルが知識グラフをたどって答える方法を試した研究である。
何に役立つ？
長い文書の推論で、単なる文章の圧縮や検索に加えて、手掛かりの関係を表す構造を使う設計の検討に役立つ。
この研究の面白いところ
最良のグラフ経路は234問中126問に正答したが、補正後の有意差はなく、グラフ構築方法による手掛かり被覆率の差が大きかった。
どこまで分かった？
30冊と234問での探索的評価で、15比較のいずれもHolm補正後に有意ではない。グラフ構築の被覆率も16％と73％で大きく異なる。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
長い文脈を扱うモデルは、小説を物語の順に一トークンずつ読み、全履歴を限られた注意の予算で扱う。一方、探偵は出来事の時系列や人物関係を整理し、冒頭の手掛かりを終盤の問いと結び付ける。本研究は、固定された知識グラフを使うことで、小型のローカルモデルにも同様の自由度を与えられるか試す。30冊の推理小説と234件の選択式質問について、固定したqwen3.5:9bを読み手とし、九つの条件で回答させた。条件は五つのグラフ経路、直近の文脈窓を使う基準、書籍全体の圧縮、通常のベクトル検索、質問だけの対照である。最良のグラフ経路は53.85％（234問中126問）に達し、直近の文脈窓は46.15％、圧縮は51.28％、ベクトル検索は51.71％、質問のみは40.17％だった。小説なしではどのモデルも答えられない質問群では、グラフ経路の正答率は42.86％だった。ただしグラフと基準法の15の比較のいずれもHolm補正後には有意性が残らず、著者らは設計に関する探索的な証拠として提示する。主要な正答率よりも確かとされる構造上の発見は二つある。注釈された証拠はグラフの位相的な中心部に集中し、全体で2.35倍の濃縮が見られた。また、二つのグラフ構築過程の注釈された手掛かり段落の被覆率には16％対73％という大きな差があり、正答率をまとめるだけでは、どの段階が制約になっているか分からなくなる。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-19（UTC）
- 最新改訂
- 2026-09-19 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-19 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Long-context models read a novel the way a person reads a printout: one token after another, in narrative order, with the whole history competing for a fixed budget of attention. A detective does not work that way. They sort what happened when, and they keep a map of who relates to whom, so a clue from chapter one can meet a question asked at the end of the book. We test whether a frozen knowledge graph can give a small local model that same freedom. Thirty detective novels and 234 multiple-choice questions are answered by one fixed qwen3.5:9b reader under nine conditions: five graph routes, a recent-window baseline, whole-book compression, ordinary vector retrieval, and a question-only control. The strongest graph route reaches 53.85% (126/234) against 46.15% for the recent window, 51.28% for compression, 51.71% for vector retrieval and 40.17% for question-only. On the subset that no model can answer without the book, the graph route reaches 42.86%. None of the fifteen graph-baseline contrasts survives Holm correction, so we present the result as exploratory evidence about a design. Two structural findings survive scrutiny better than the headline number: annotated evidence concentrates in the topological core of these graphs (2.35x enrichment, pooled), and the two graph-building pipelines differ so much in annotation coverage (16% versus 73% of clue paragraphs) that pooled accuracy alone would hide which bottleneck is being measured.
著者のコメント
10 pages, 11 figures, 2 tables. Code, graph data and an interactive demo: https://github.com/fuxiaoji/novel-graph-lab
arXiv ID: 2609.22939 ／ 要約の誤りについて