生成型推薦で役立つ推論過程を選び学習するEvo-Rec
Learning Better Reasoning for Generative Recommendation with Semantic IDs
この論文をやさしく読む
ひとことで言うと
次に薦める品目を生成するモデルで、正解品目の予測に役立つ途中の推論を選んでさらに学習する方法を示した研究。
何に役立つ?
セマンティックIDを使う生成型推薦で、推論を増やすだけでなく、役立つ推論を選んで改善する学習設計に参考になる。
この研究の面白いところ
複数の推論候補から正解品目の予測を良くするものを選び、教師あり学習の後に順位を考慮した強化学習も行う。
どこまで分かった?
結果はAmazon Reviewsの三つのベンチマークによる。改善幅の具体的な数値や実際のサービスでのオンライン評価は要旨に記載されていない。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
生成型推薦は品目の検索を系列生成として捉え直し、統一したモデルが利用者の行動履歴から次の品目を直接生成できるようにする。セマンティックIDは各品目を離散的な符号で表し、意味的に近い品目間で知識を共有できるため、この方式を有効で拡張可能なものにする。最近の研究ではセマンティックIDを生成する前に明示的な推論を行わせ、利用者の関心を要約し、好みの変化を推測させている。しかし、推論は必ずしも役立たない。不正確で情報の乏しい推論は、後続の品目生成を誤らせ、推薦性能を下げ得る。そこで、推薦システムが有効な推論記録を選び学習し、自身の生成結果から段階的に推論を改善する方法が課題となる。 本研究は、よりよい推論を学習し、強化学習でさらに改善する三段階の枠組みEvo-Recを提案する。第一に、セマンティックIDを品目の文章と行動の文脈に対応付け、モデルが品目識別子を理解・生成できるようにする。第二に、複数の推論候補をサンプルし、正解品目の予測を改善するものを残して、教師あり追加学習による推論の出発点を強くする。第三に、商品一覧に制約した品目生成と、順位を考慮した推薦のフィードバックによる強化学習で、推論方策をさらに最適化する。Amazon Reviewsの三つのベンチマークでの実験では、Evo-Recはすべての評価指標で、識別型、生成型、推論を強めた推薦法を一貫して上回った。これらの結果は、SIDに基づく生成型推薦で、より有効な推論を学ぶ枠組みの効果を示す。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-24(UTC)
- 最新改訂
- 2026-09-24 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-24 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Generative recommendation reformulates item retrieval as sequence generation, allowing a unified model to directly generate the next item from a user's interaction history. Semantic IDs further make this paradigm effective and scalable by representing each item as discrete codes, enabling knowledge sharing among semantically related items. Recent studies introduce explicit reasoning before Semantic-ID generation, helping models summarize user interests and infer possible preference transitions. However, reasoning is not inherently beneficial: Inaccurate or uninformative reasoning may mislead subsequent item generation and ultimately degrade recommendation performance. This raises a central challenge: how can a recommender select and learn effective reasoning traces and progressively evolve toward better reasoning from its own generations? In this work, we propose Evo-Rec, a three-stage framework for learning better reasoning and further enhancing it through reinforcement learning. First, we align Semantic IDs with their textual and behavioral contexts, enabling the model to understand and generate item identifiers. Second, we sample multiple candidate reasoning traces and retain those that improve the prediction of the ground-truth item, providing a stronger reasoning initialization through supervised fine-tuning. Third, we further optimize the reasoning policy through reinforcement learning with catalog-constrained item generation and ranking-aware recommendation feedback. Experiments on three Amazon Review benchmarks show that Evo-Rec consistently outperforms discriminative, generative, and reasoning-enhanced recommenders across all evaluation metrics. These results demonstrate the effectiveness of our framework in learning better reasoning for SID-based generative recommendation.
arXiv ID: 2609.29973 / 要約の誤りについて