単調包含問題に対する最適な高次近接法
Anchored Extra-Proximal Methods: Optimal Higher-Order Methods for Monotone Inclusion Problems
この論文をやさしく読む
ひとことで言うと
二種類の単調作用素を組み合わせた最適化問題を、高次の近接法でどれだけ速く近似的に解けるかを示す理論研究。
何に役立つ?
複合単調包含問題向けアルゴリズムの計算量を比較し、改善可能な限界を理解するのに役立つ。
この研究の面白いところ
p次の方法に対し Õ(ε^−2/(3p−1)) の上界と対応する下界を示し、対数因子を除く最適性を得る。
どこまで分かった?
p≥2、一価作用素のp−1階導関数がリプシッツ連続、接線残差という基準などの条件が付く。実装速度の実験は要旨にない。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
滑らかな一価の単調作用素と、極大単調な多価作用素の和からなる複合単調包含問題について、接線残差の基準で近似解を見つけるために必要な決定的オラクルの計算量を研究する。アンカー付き外挿ステップと、相対誤差の条件を満たす不正確なアンカー付き近接更新を組み合わせた、Anchored Extra-Proximal(AEP)の枠組みを導入する。この枠組みは、一次の設定では複合Fast Extragradient法を再現する。暗黙的な更新で使う作用素を、外挿した点でのテイラー近似に置き換えると、自然な二次および高次の拡張が得られる。pが2以上で、一価作用素のp−1階導関数がリプシッツ連続と仮定すると、この構成と二分探索による直線探索を組み合わせたp次の方法により、接線残差がε以下の点を、対数因子を除いて Õ(ε^−2/(3p−1)) 回のオラクル呼び出しで見つけられる。これはp次の方法に関する従来のすべての上界を改善し、特に、接線残差についての従来最良の Õ(ε^−1/p) と、より弱い双対ギャップ基準の下での高次ハイブリッド近接外挿法の古典的な O(ε^−2/(p+1)) を改善する。さらに、p次オラクルモデルにおけるすべての決定的アルゴリズムについて、最悪の場合の下界 Ω(ε^−2/(3p−1)) を示す。この下界では、アルゴリズムをテンソルステップなどの特定の更新形式に制限しない。したがって提案法は、すべてのp≥2について、対数因子を除き、εへの依存関係が最適である。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-24(UTC)
- 最新改訂
- 2026-09-24 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-24 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
We study the deterministic oracle complexity of finding approximate solutions to composite monotone inclusion problems, formed by the sum of a smooth single-valued monotone operator and a maximally monotone set-valued operator, under the tangent-residual criterion. We introduce the Anchored Extra-Proximal (AEP) framework, which combines an anchored extrapolation step with an inexact anchored proximal update satisfying a relative-error condition. The framework recovers the composite Fast Extragradient method in the first-order setting and yields natural second- and higher-order extensions by replacing the operator in the implicit update with its Taylor approximation at the extrapolated point. For every $p\geq 2$, assuming that the $(p-1)$th derivative of the single-valued operator is Lipschitz continuous, we combine this construction with a bisection line search to obtain a $p$th-order method that finds a point with tangent residual at most $\varepsilon$ in $\widetilde{O}(\varepsilon^{-2/(3p-1)})$ oracle calls. This improves all prior upper bounds for $p$th-order methods: in particular, it improves the previous best-known $\widetilde{O}(\varepsilon^{-1/p})$ tangent-residual complexity as well as the classical $O(\varepsilon^{-2/(p+1)})$ bound of higher-order hybrid proximal extragradient methods under the weaker duality-gap criterion. We complement this result with a worst-case lower bound of $\Omega(\varepsilon^{-2/(3p-1)})$ for every deterministic algorithm in the $p$th-order oracle model, without restricting the algorithm to tensor steps or any other prescribed update structure. Thus, the proposed method attains the optimal dependence on $\varepsilon$, up to logarithmic factors, for all $p\geq2$.
著者のコメント
51 pages
arXiv ID: 2609.30212 / 要約の誤りについて