生成履歴を利用して言語モデルの重複回答を減らす
FLEET: From Logits Entropy to Enhanced Trajectories in Text Generation
この論文をやさしく読む
ひとことで言うと
過去の生成結果を使って次の生成を調整し、似た回答の繰り返しを減らす方法。
何に役立つ？
複数回答を生成して選ぶLLMの推論で、同じ精度をより短時間で得るための手法候補になる。
この研究の面白いところ
高エントロピーの状態を通る生成の軌跡を記憶し、そこから各トークンのロジットを調整する。
どこまで分かった？
速度と精度の数値は要旨に記載されたベンチマークと計算予算の条件で得た結果である。ほかのモデルや課題で同じ改善が得られるとは記載されていない。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
大規模言語モデル（LLM）を使う解法では、生成分布から複数の回答をサンプリングして集約し、正確さと安定性を高めるために温度付きサンプリングを用いることが多い。しかし、この方法には過去に生成した回答やその評価の記憶がなく、サンプル数が増えるほど意味的に重複する回答の割合が増え、効果が頭打ちになる。これに対処するため、生成過程に記憶機構を組み込んだFLEETを提案する。FLEETは、エントロピーが所定の閾値を超える状態を通る疎な軌跡として各生成を表し、その軌跡からトークンごとの有用性スコアを推定してロジットを調整する。 ベンチマーク評価では、繰り返しサンプリングを行う基準法と同じ正解率を3倍の速度で達成し、同じ計算予算の複雑なプログラミング課題では正解率を大幅に改善した。LiveCodeBenchのPass@32は59.9%から66.2%に上昇した。また、ここで評価した貪欲デコーディングの設定では決定的に動作し、主なハイパーパラメータを決めるのに必要な較正は1回だけで、既存のLLM処理系への変更も最小限で済む。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-23（UTC）
- 最新改訂
- 2026-09-23 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-23 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Solutions based on large language models (LLMs) often rely on temperature sampling to improve accuracy and stability by aggregating multiple samples from the completion distribution. However, this memoryless approach is inherently suboptimal: because it lacks awareness of prior generations and their evaluations, it produces an increasing proportion of semantically duplicate answers as more samples are drawn, leading to diminishing returns. To address this limitation, we introduce FLEET, a novel method that integrates a memory mechanism into the generation process. FLEET represents each generation as a sparse trajectory through states whose entropy exceeds a predefined threshold and uses these trajectories to infer per-token utility scores that adjust the logits. Benchmark evaluations demonstrate that FLEET achieves the same accuracy as the repeated sampling baseline, with a 3x speedup, and substantially improves accuracy on complex coding tasks (LiveCodeBench Pass@32 increases from 59.9% to 66.2%) under the same budget. Furthermore, in the greedy-decoding configuration evaluated here, the approach is deterministic and uses a single calibration pass to derive its principal hyperparameters, requiring only minimal modifications to existing LLM pipelines.
著者のコメント
25 pages, 8 figures. Algorithm source code and experiments: https://github.com/Alexiush/fleet
arXiv ID: 2609.27657 ／ 要約の誤りについて