言語モデルが示す候補の却下理由は選択に影響するか
Does a model's stated reason for rejecting a candidate do any work?
この論文をやさしく読む
ひとことで言うと
言語モデルが「この事実がない」として候補を退けたとき、実際にその事実を加えると選択が変わるか調べています。
何に役立つ？
言語モデルの説明と実際の選択の関係を検査する実験設計や、出力を判定する文字列規則の点検に役立ちます。
この研究の面白いところ
名指しされた候補では無関係な文を加えるだけでも選択が動き、応答解析規則の欠陥を直すと統計的な結論の数まで変わりました。
どこまで分かった？
内容による効果の解釈には、文の流暢さなどの違いが残ります。中心的な対比の一つは補正後に有意でなく、強制トークン確率と自由記述の選択も一致していません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
候補の中から一つを選び理由を説明するよう求めると、言語モデルは競合候補を退ける理由として、その候補の記述にない事実、例えば取締役や死亡日が書かれていないことを挙げる場合がある。この文はモデルの前にあるテキストについての主張であり、判定者なしで検証できる。著者らは、モデルが欠けていると述べた事実を示す実際のコーパスの一文を競合候補の記述に加え、決定的なデコードで再び選ばせる。内容と挿入位置を切り分けるため、同じ長さで無関係な文を同じ候補に加える場合と、2種類の文をモデルが言及しなかった第三の候補に加える場合を対照とした。3回の実行のうち最大のものでは、2WikiMultihopQA上の公開モデル6種で、モデルが名指しした候補に当該事実を加えると、無関係な文を加えた対照より選択が動きやすかった。オッズ比は3.57、区間は[1.54, 8.26]、Holm補正後のp値は0.0210であり、どの1モデルを除いてもこの結果は残った。一方、設計の中心だった、名指しされなかった候補に同じ事実を加える対比は補正後の基準を満たさず、Holm補正後のp値は0.2428だった。この系列で最も強い結果は内容と無関係で、同一の無関係な文でも、第三の候補より名指しされた競合候補に加えた方が選択を動かした。Holm補正後のp値は0.0008だった。事実を補う文と対照文は、共通して言及される候補、関係の文型、流暢さも異なる。事後的に最初の2項目を合わせると内容に関する効果の向きは保たれたが、流暢さを合わせると一つの効果が弱まり、内容の対比は効果を確立するのではなくその範囲を示すにとどまる。同じ対比に対し、単一トークンを強制した確率による読み出しは自由記述の選択と逆方向を示し、その不一致を説明する3つの候補にも裏付けはなかった。すべての測定は文字列に基づく規則なので、各規則を読み取る記録と照らして検証し、8つの欠陥を発見した。最大の欠陥は、判定可能な応答の17.1％でモデルが直前に退けた候補を返す選択解析規則で、修正しなければ補正後も残る対比が4つではなく6つと報告されていた。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-24（UTC）
- 最新改訂
- 2026-09-24 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-24 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Asked to choose between candidates and explain the choice, a language model often rejects a rival by naming a fact its profile lacks: no director, no date of death. That sentence is a claim about the text in front of the model, and it can be tested without any judge. We insert a real corpus sentence stating the named fact into the rival's profile and ask again under greedy decoding. Two controls separate content from placement: a length-matched irrelevant sentence at the same profile, and the same two sentences at a third option the model never mentioned. In the largest of three runs, six open models on 2WikiMultihopQA, supplying the named fact at the profile the model named moves its choice more than the irrelevant control does, odds ratio 3.57 [1.54, 8.26], Holm p=0.0210, and this survives dropping any single model. The contrast the design was built to detect, the same fact at the option nobody named, does not clear correction, Holm p=0.2428. The strongest result in the family carries no content claim at all: the identical irrelevant sentence moves the choice more at the named rival than at the third option, Holm p=0.0008. Repair and control also differ in co-candidate mentions, relation template and fluency; post-hoc matching on the first two preserves the content effects' direction, matching fluency weakens one, so the content contrasts bound an effect rather than establish one. A forced single-token probability read disagrees in direction with the free-text choice on that same contrast, and three candidate explanations for the disagreement find no support. Every measurement is a string rule, so each was validated against the records it reads; validation caught eight defects. The largest, a choice-parsing rule that returned the option a model had just rejected in 17.1% of adjudicable responses, would have reported six surviving contrasts instead of four.
著者のコメント
Accepted as an oral presentation at LLM4XAI 2026: Workshop on Large Language Models for Explainable AI, co-located with CIKM 2026, Rome, Italy, November 8, 2026. Code and per-item records: https://github.com/ArchitRastogi20/contrastive-rejection-test
arXiv ID: 2609.30151 ／ 要約の誤りについて