arXiv論文メモ
新着一覧
stat.ML / cs.AI / cs.LG · 査読状況未確認

選択式LLMから数値を得る多分岐決定木

NumericJev: Jev-like LLM Numerical Decoding with Multiway Decision Trees

Weiwei Ye, Hangchen Liu, Renhe Jiang

この論文をやさしく読む

ひとことで言うと

選択肢から一つを選ぶLLMに、数値範囲を段階的に選ばせて指定精度の数値を出す方法。

何に役立つ?

数値を直接生成できない構造化出力モデルで、算術や数値照会に答える仕組みとして使える。

この研究の面白いところ

100候補を10分岐の木で2回選択させ、直接選択より平均絶対誤差を下げた。

どこまで分かった?

報告値は著者らの算術ベンチマークと三日付の指数課題での結果であり、あらゆる数値課題への性能は示していない。

v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。

アブストラクトの日本語訳

大規模言語モデルは自然言語を解釈できるが、頑健に判断するのはなお難しい。Jevに似たモデルは構造化された選択肢を扱える一方、そのインターフェースから指定した精度の数値を直接得ることはできない。本研究は、Jev型の選択インターフェースを持つ任意のLLMから数値を出力できる、学習不要の数値復号法NUMERICJEVを提案する。算術ベンチマークでは、正解を含む候補一覧から直接選ぶ方法より2.93パーセントポイント高い性能を示した。発想の基礎は、数値範囲の選択自体がJev型LLMに解ける意思決定問題だという観察にある。元の質問を文脈に保ちながら、多分岐の決定木で数値範囲を再帰的に狭める。パラメータの更新や内部状態へのアクセスは必要ない。 100個の値から選ぶ格子では、10分岐の木なら意思決定を2回行うだけでよい。範囲で正規化した平均絶対誤差は1.84%で、直接選択の5.18%より小さかった。別の三つの日付を使う歴史的な指数の研究では、平均相対想起誤差が4.58%、値が与えられた場合の読み出し誤差が0%だった。コードも公開されている。

v1の要旨から自動生成。本文の精読・人による確認は未実施。

初稿
2026-09-23(UTC)
最新改訂
2026-09-23 · v1
査読・掲載
査読状況未確認
arXivで読むPDF

更新履歴

取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。

原文の要旨

Large language models can interpret natural lan- guage, yet robust decisions remain challenging. Jev-like models expose structured choices, but these interfaces do not directly provide numeri- cal values at a requested precision. We propose NUMERICJEV, a training-free numerical decod- ing algorithm that enables numerical output from any LLM with a Jev-like structured-choice in- terface. Surprisingly, on our arithmetic bench- mark, it outperforms direct selection from a can- didate list containing the correct answer by 2.93 percentage points (Figure 1). Our motivation comes from the observation that numerical range selection is itself a decision problem that Jev- like LLMs can address. NUMERICJEV recur- sively refines a range through a multiway deci- sion tree while retaining the original question in context, without parameter updates or hidden- state access. On a 100-value grid, a ten-way tree requires only two decision rounds. Range- normalized MAE is 1.84% versus 5.18% for di- rect choice. A separate three-date historical- index study yields 4.58% mean relative recall er- ror and 0% readout error when the value is sup- plied. Code is available at https://github. com/Bring-AI/jev-numeric.

arXiv ID: 2609.28587 / 要約の誤りについて