GPUとCPUの分担で超大規模な個別化検索を実現
Hybrid GPU-CPU Retrieval for Personalized Search at Ultra-Large Scale
この論文をやさしく読む
ひとことで言うと
検索を一つの巨大な計算経路に任せず、GPUが詳しく調べる経路とCPUが広く探す経路を組み合わせる研究です。両方が見つけた候補をまとめ、最後に同じランキング処理に渡します。
何に役立つ？
文書数が非常に多く、応答速度と個別化の両方が必要な検索システムの設計に役立ちます。要旨では実際の本番導入とA/Bテストによる改善が報告されており、単なる設計案ではありません。
この研究の面白いところ
新しい検索モデルそのものより、計算資源の役割分担で性能と規模の対立を扱います。GPU側の約10億文書に対し、CPU側は約20倍の集合を扱い、異なる候補を補い合います。
どこまで分かった？
要旨には関連性やエンゲージメントの具体的な改善率、遅延値、費用額は示されていません。兆文書規模という全体の文脈と、各経路がオンラインで検索する選定済み文書数は区別する必要があります。他のサービスで同じ効果が得られるかは要旨からは分かりません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
ユーザー生成コンテンツを兆文書規模で埋め込みに基づいて検索すると、本番運用における二つの要求が鋭く対立する。豊かなユーザー意図を持つクエリに対して、深く表現力の高い個別化を行うことと、決められた遅延・資源の予算内で膨大な文書群を広くカバーすることである。本研究はこれを個別化と規模のパラドックスとして捉える。検索提供対象の全体をGPUメモリーに置くのは資源負担が大きすぎる一方、CPUでは、同じ相互作用の多いモデルを遅延が重要な処理経路で実行できない。 本研究では、新たなモデルの種類ではなく処理の編成によってこのパラドックスを解決する、GPUとCPUの協調型検索システムを提案する。深い処理を担うGPU経路は、約10億文書からなる選別済みオンライン集合を対象に、検索と相互作用を用いた事前ランキングを融合する。広い範囲を担うCPU経路は、独立に選定された約20倍大きいオンライン文書群を、軽量な個別化スコアで検索する。各リクエストでは片方または両方の経路を実行でき、候補の重複を除去した後に、共通の後段ランキングへ渡す。 このシステムは本番環境に導入されている。従来のCPUのみの構成と比較するシステム全体のA/Bテストでは、モデルが採点した関連性と実質的なエンゲージメントが向上した。各経路を別々に調べた実験でも、それぞれの導入範囲で有益性を確認した。検索ログは両経路が構造的に異なる候補を供給することを示し、本番配信の測定は各経路の遅延特性を明らかにする。また、条件をそろえた容量計画によって、モデルの深さをGPUに、文書群の広さをCPUに割り当てる経済的根拠を定量化する。これらの結果は、超大規模な個別化検索に向けて、深さと広さをそれぞれ独立に発展させられる実用的な構成を検証するものである。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-18（UTC）
- 最新改訂
- 2026-09-18 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-18 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Embedding-based retrieval on user-generated content at the trillion-document scale exposes a sharp conflict between two production demands: deep, expressive personalization for queries with rich user intent, and broad coverage of a massive inventory under fixed latency and resource budgets. We characterize this as the personalization-scale paradox: hosting the full serving inventory in GPU memory is too resource intensive, while CPU compute cannot execute the same interaction-heavy model on the latency-critical path. We present a hybrid GPU-CPU co-serving system that resolves the paradox through orchestration rather than a new model class. A high-depth GPU pathway fuses retrieval and interaction pre-ranking over a curated online pool on the order of a billion documents, while a high-breadth CPU pathway searches an independently selected online inventory roughly twenty times larger with lightweight personalized scoring. Either or both pathways can run per request; candidates are deduplicated before shared downstream ranking. The system is deployed in production. A full-system A/B test against the legacy CPU-only configuration improves model-scored relevance and substantive engagement, while separate pathway experiments show positive value at their own deployment scopes. Retrieval logs show that the pathways contribute structurally distinct candidates, production serving measurements characterize their latency, and a matched capacity plan quantifies the economic rationale for assigning modeling depth to GPUs and inventory breadth to CPUs. Together, these results validate a practical, independently evolvable depth-breadth architecture for ultra-large-scale personalized search.
著者のコメント
10 pages, 5 figures, 9 tables. ACM sigconf format; submitted to the KDD 2027 Applied Data Science Track
arXiv ID: 2609.21281 ／ 要約の誤りについて