取り出した記憶を使うべきか判断する言語モデル制御層
An Interpretable Memory Decision Controller for LLM Agents Based on Three-Signal Complementarity: Decoupling Confidence and Consistency
この論文をやさしく読む
ひとことで言うと
検索で見つかった記憶をそのまま言語モデルへ渡すのではなく、関連性・信頼性・リスクを見て採用や保留を判断する仕組みです。
何に役立つ?
矛盾した記憶を持つエージェントで、誤った回答の増加を抑える用途が考えられます。判断に至る計算を追えるため、記憶の採否を点検する仕組みとしても参考になります。
この研究の面白いところ
確信が強いことと、情報同士が整合していることを分けています。新たな学習済み判定器を使わず、幾何学的計算で低い追加遅延を目指している点も特徴です。
どこまで分かった?
約56.04%の削減と高リスク場面でのほぼゼロという結果は、評価したモデル・データ・条件での報告です。要旨には各場面の詳細や回答保留の頻度は示されておらず、一般的に誤りがなくなる保証とは読めません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
大規模言語モデルの記憶システムは、主として効率的な検索に注目してきた一方、検索した記憶を信頼すべきかどうかの判断には、比較的少ない関心しか払われてこなかった。記憶ストアに相反する立場が含まれると、標準的な検索拡張生成(RAG)は記憶を無条件に注入し、ハルシネーションを増幅する。記憶注入の影響を受けやすいモデルでは、矛盾する記憶の下でのRAGのハルシネーション率が、記憶を使わないベースラインを著しく上回る。 前頭前皮質の記憶シグナル機構に着想を得て、検索段階と生成段階の間に配置する、パラメータを持たない記憶判断コントローラMemory Decision Layer(MDL)を提案する。中核となるのは3つの信号を相補的に扱うエンコーダである。関連性、信頼性、タスクのリスクを、QR分解に基づく直交部分空間への射影とメタ作業記憶信号を通じて統合し、検索された記憶の信頼度を定量化する解釈可能な判断表現を生成する。このエンコーダを基に、MDLは確信度と整合性を明示的に切り離し、リスク反転と明示的な回答保留を導入する。 主要な大規模言語モデルと複数の公開データセットを用いた評価では、MDLは矛盾する記憶がある場合のハルシネーション率を一般的な場面で約56.04%削減し、高リスク場面ではほぼゼロに近づけた。このコントローラは完全なホワイトボックスであり、純粋に幾何学的演算だけに依存し、学習したパラメータを必要としない。追加時間は判断1回当たり約0.14 msにすぎず、直前の埋め込み検索処理より約50倍高速で、LLMによる自己評価の呼び出しより4~5桁高速である。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-18(UTC)
- 最新改訂
- 2026-09-18 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-18 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Memory systems for large language models have focused predominantly on efficient retrieval, whereas the decision of whether retrieved memories should be trusted has received comparatively little attention. When the memory store contains conflicting positions, standard retrieval-augmented generation (RAG) blindly injects memories and amplifies hallucinations: in models susceptible to memory injection, the RAG hallucination rate under conflicting memories is markedly higher than that of a memory-free baseline. Inspired by memory signaling mechanisms in the prefrontal cortex, we propose the Memory Decision Layer (MDL), a zero-parameter memory decision controller situated between the retrieval and generation stages. Its core is a three-signal complementary encoder that fuses relevance, reliability, and task risk through QR-based orthogonal subspace projection and a meta-working-memory signal into an interpretable decision representation that quantifies the trustworthiness of retrieved memories. Building on this encoder, MDL explicitly decouples confidence from consistency and introduces risk inversion and explicit abstention. Evaluations on mainstream large language models and multiple open-source datasets show that MDL reduces the hallucination rate under conflicting memories by about 56.04% in general scenarios and approaches zero hallucination in high-risk scenarios. The controller is fully white-box: it relies purely on geometric operations, requires no trained parameters, and adds only about 0.14 ms per decision -- roughly 50x faster than the embedding-retrieval step that precedes it and four to five orders of magnitude faster than an LLM self-evaluation call.
著者のコメント
17 pages, 6 figures, 10 tables
arXiv ID: 2609.22043 / 要約の誤りについて