arXiv論文メモ
新着一覧
cs.IR · 査読状況未確認

推薦システムの検索から最終順位付けまで一つのモデルで処理

OneTrans-V2: Unifying Retrieval, Pre-rank, and Fine-rank with One Transformer in Industrial Recommender

Hannan Cao, Jun Guo, Haolei Pei, Zhaoqi Zhang, Tianyu Wang, Ziyang Wang, Youchen Sun, Yue Xue, Yucheng Mao, Lintao Yan, Yufei Feng, Shaowei Liu, Rongkun Xing, Feiling Gong, Xinyu Chenli, Cong Xu, Mingge Zhang, Yunjia Zhu, Yajing Zhang, Pengfei Ren, Yue Lin

この論文をやさしく読む

ひとことで言うと

商品推薦の候補検索から最終順位付けまでを一つのトランスフォーマーで処理し、利用者履歴の重複計算を減らした。

何に役立つ?

大規模な推薦サービスで学習と配信の効率を上げ、事業上の目的を検索へ反映する設計の参考になる。

この研究の面白いところ

実運用の三段階へ導入し、GMV9.74%増、同じハードウェアで処理量3.2倍を報告した。

どこまで分かった?

性能値は著者らの大規模な産業用推薦システムでの結果で、他のサービスでも同じ改善を保証するものではない。

v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。

アブストラクトの日本語訳

産業用の推薦システムは通常、候補の検索、事前順位付け、詳細順位付けを連続して行う。しかし各段階を別々の模型として学習・運用することが多く、利用者の行動履歴を繰り返し符号化し、最適化が分断され、開発作業も重複する。OneTransの模型レベルでの統合を基に、本研究は全工程を一つのトランスフォーマーに統合するOneTrans-V2を提示する。利用者の行動履歴を共有文脈として一度だけ符号化しつつ、各段階固有の候補特徴と計算は保つ。共同学習で三段階が互いに補強し、模型内部で詳細順位付けから事前順位付けへの知識蒸留も可能になる。疎な専門家混合(MoE)で共有部分の容量を増やしながら実際に使う計算量を抑え、μP型のパラメータ化で大規模化を安定させる。 目的別の検索経路を統合するため、決定条件付き生成検索(DCGR)を導入する。今後の利用者の反応を表す決定の接頭辞を予測し、それを条件に商品を生成することで、事業上の目的を一つの生成過程に反映できる。さらに、系列中心の学習(SNT)では利用者の長期的な行動履歴を軸に学習を組み立て、複数の表示機会で符号化の費用を分担する。大規模な産業用推薦システムの三段階すべてに導入した結果、流通取引総額(GMV)は9.74%向上し、提供用の実行基盤も共同設計することで、同じハードウェア予算で従来の連鎖型システムの3.2倍の処理量を得た。

v1の要旨から自動生成。本文の精読・人による確認は未実施。

初稿
2026-09-23(UTC)
最新改訂
2026-09-23 · v1
査読・掲載
査読状況未確認
arXivで読むPDF

更新履歴

取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。

原文の要旨

Industrial recommendation systems typically operate as a \emph{cascade} of retrieval, pre-rank, and fine-rank, but these stages are usually trained and served as separate models, causing repeated user-sequence encoding, isolated optimization, and duplicated engineering effort. Building on OneTrans' model-level unification, we present OneTrans-V2, one Transformer that unifies the entire cascade. It encodes the user behavior sequence once as a shared context while preserving stage-specific candidate features and computation. Joint training lets the three stages reinforce one another and enables in-model knowledge distillation from fine-rank to pre-rank. We scale the shared backbone with sparse mixture-of-experts (MoE), which increases capacity with bounded activated computation, and stabilize scaling with $\mu$P-style parameterization. To consolidate objective-specific retrieval channels, we introduce Decision-Conditioned Generative Retrieval (DCGR). DCGR predicts a decision prefix describing the upcoming interaction and generates items conditioned on it, allowing business objectives to steer a single generative process. Finally, Sequence-Native Training (SNT) organizes training around each user's lifelong behavior sequence and amortizes its encoding across exposures. Deployed across all three stages of a large-scale industrial recommendation system, OneTrans-V2 improves gross merchandise value (GMV) by 9.74\% and, with a co-designed serving stack, delivers $3.2\times$ the throughput of the cascade it replaces under the same hardware budget.

arXiv ID: 2609.28589 / 要約の誤りについて