arXiv論文メモ
新着一覧
math.OC / cs.LG / stat.ML · 査読状況未確認

強凸・強凹ミニマックス最適化の単一ループ解法

Near-Optimal Pure Single-Loop Extragradient Method for Strongly Convex--Strongly Concave Minimax Optimization

Minhao Zhang and Zi Xu

この論文をやさしく読む

ひとことで言うと

強凸・強凹のミニマックス問題を、入れ子の最適化を使わず一つの反復ループで効率よく解く方法です。

何に役立つ?

その条件を満たす鞍点問題で、実装が単純な固定更新則と収束保証を両立させるために役立ちます。

この研究の面白いところ

補助的なフィードバック再帰を使い、初期化後は各反復で二回の全勾配評価を行います。段階的再始動なしに、最後の反復点の線形収束とほぼ最適な条件数依存を示します。

どこまで分かった?

滑らかで強凸・強凹、決定論的、無制約という条件です。対数因子を除いた最適性であり、非凸問題や確率的勾配への同じ保証は要旨にありません。

v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。

アブストラクトの日本語訳

決定論的かつ制約のない設定で、一般的な非線形結合を持つ、滑らかな強凸・強凹ミニマックス最適化を研究する。固定パラメータを用いる純粋な単一ループの減衰型外挿勾配法を提案する。初期化の問い合わせを1回行った後は、各反復で新たな全勾配評価を2回行う。この方法は補助的なフィードバック再帰を用い、内部問題の求解、精度のスケジュール設定、段階的な再始動を必要としない。 最終反復点の線形収束を確立し、鞍点までのEuclid距離の二乗を初期値の ε 倍まで減らすのに必要な全勾配の問い合わせ回数が、O(√(κₓκᵧ) log(2κₓκᵧ/ε)) であることを示す。ここで κₓ = L/μₓ、κᵧ = L/μᵧ である。この評価は、固定された明示的な更新によって、対数因子を除き条件数に関する最適なオーダーを達成する。数値実験により本手法の有効性を示す。

v1の要旨から自動生成。本文の精読・人による確認は未実施。

初稿
2026-09-17(UTC)
最新改訂
2026-09-17 · v1
査読・掲載
査読状況未確認
arXivで読むPDF

更新履歴

取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。

原文の要旨

We study smooth strongly convex--strongly concave minimax optimization with general nonlinear coupling in the deterministic unconstrained setting. We propose a pure single-loop damped extragradient method with fixed parameters and two new full-gradient evaluations per iteration after one initialization query. The method uses an auxiliary feedback recursion and requires no inner solves, accuracy schedules, or staged restarts. We establish last-iterate linear convergence and show that reducing the squared Euclidean distance to the saddle point to an $\varepsilon$ fraction of its initial value requires $O(\sqrt{\kappa_x\kappa_y}\log(2\kappa_x\kappa_y/\varepsilon))$ full-gradient queries, where $\kappa_x=L/\mu_x$ and $\kappa_y=L/\mu_y$. This bound attains the optimal condition-number order up to logarithmic factors through fixed explicit updates. Numerical experiments demonstrate the effectiveness of the method.

arXiv ID: 2609.20327 / 要約の誤りについて