ガウス過程のカーネルをオンラインで混合して意思決定する
Online Adaptive Kernel Mixing for Gaussian Process Decision Making
この論文をやさしく読む
ひとことで言うと
ガウス過程で未知の関数を探る際、最初に一つのカーネルへ固定せず、複数候補の重みを観測に応じて更新する方法です。
何に役立つ？
ベイズ最適化、レベル集合推定、能動学習で、カーネルの選び間違いによる性能低下を抑えるための方法になります。
この研究の面白いところ
各カーネルを一人の専門家のように扱い、関数への適合と課題の目的を反映する損失からAdaHedgeで重みを更新します。混合ガウス方式とカテゴリカルな選択方式の二案を示しています。
どこまで分かった？
最良カーネルへの重み集中などの理論保証には損失の差に関する条件があります。三種の課題で頑健な実験結果を報告していますが、要旨には具体的な改善幅はありません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
ガウス過程（GP）は、ベイズ最適化（BO）、レベル集合推定（LSE）、ベイズ能動学習（BAL）などの逐次意思決定問題で、ブラックボックス関数の代理モデルとして広く使われる。GPの性能はカーネルに大きく依存し、モデルの仮定が適切でない場合、標準的なカーネルでは最適でない意思決定につながり得る。 これに対処するため、カーネル選択を専門家の助言を用いるオンライン学習問題として捉えるHACK GP（Hedge Adaptive Cumulative Kernels）を導入する。HACKは各候補カーネルをGPの「専門家」とみなし、関数への当てはまりと課題の目的への適合能力の代理となる損失に基づいて、AdaHedgeで専門家上の分布をオンライン更新する。ガウス混合（MoG）とカテゴリカル・サンプリングという2つの方式を示す。 損失差に関する条件のもとで、重みが最良のカーネルへ集中し、得られる獲得関数が最良の専門家のものに近づくという一般的な保証を示す。実証評価では、二乗指数カーネルやMatérn-5/2などの標準カーネル、および単純なアンサンブルの比較手法に対し、BO、LSE、BALを通じて安定した性能を観測した。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-17（UTC）
- 最新改訂
- 2026-09-17 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-17 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Gaussian Processes (GPs) are widely used as surrogates for black-box functions in sequential decision-making problems such as Bayesian optimization (BO), level set estimation (LSE), and Bayesian active learning (BAL). GP performance critically depends on kernels, and standard kernels can lead to suboptimal decisions under misspecification. To address this, we introduce HACK GPs (Hedge Adaptive Cumulative Kernels), a method that views kernel selection as an online learning with expert advice problem. HACK treats each candidate kernel as a GP "expert" and updates a distribution over experts online using AdaHedge, based on a loss received as a proxy for their ability to fit the function and align with the task objective. We provide two variants of HACK: (i) Mixture of Gaussians (MoG) and (ii) categorical sampling. We establish general guarantees showing that, under a loss-gap condition, the weight concentrates on the best kernel and the resulting acquisition function is close to that of the best expert. Empirically, we observe robust performance across BO, LSE, and BAL compared to standard kernels such as Squared Exponential and Matern-5/2, as well as simple ensemble baselines.
著者のコメント
35 pages, 9 figures. Accepted as a full paper at IFIP Performance 2026
arXiv ID: 2609.19891 ／ 要約の誤りについて