arXiv論文メモ
新着一覧
cs.LG / math.OC · 査読状況未確認

再最適化なしで資源配分するオンライン線形計画法

Resource-Adaptive Stochastic Gradient Descent for Online Linear Programming without Re-solving

Jiameng Lyu

この論文をやさしく読む

ひとことで言うと

要求が順番に届く資源配分問題で、毎回線形計画を解き直さずに価格を更新する方法を提案した研究。

何に役立つ?

LLM推論や検索サービスなど、大量の要求に資源を割り当てるオンライン線形計画で、計算量と配分品質を両立する設計に役立つ可能性がある。

この研究の面白いところ

到着1回当たりO(m)の演算・メモリーで、条件の下では期待リグレットO(log T)を達成し、理論的な下界と一致する。

どこまで分かった?

理論結果には標準的な非退化条件がある。数値実験での比較は試した手法との比較であり、あらゆる実際のサービスでの性能を示すものではない。

v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。

アブストラクトの日本語訳

大規模言語モデル(LLM)の推論や検索サービスの拡大により、オンライン線形計画問題も大規模になり、計算効率のよいアルゴリズムが求められる。本研究は、確率的オンライン線形計画向けに、資源適応型確率的勾配降下法(RASGD)を開発する。各到着時に1件の要求と現在の在庫を使って資源の価格を更新し、資源数をmとすると、到着1回当たりの演算量とメモリー量はO(m)で、線形計画や標本平均に基づく最適化は不要である。中心となる考え方は、再最適化で使う現在の資源量に応じた価格付けを、一次のSGD更新で表すことにある。各要求の到着時に、双対目的関数で使う残り在庫の許容量を更新する。ステップ幅は初期の学習段階では小さくし、後半には在庫調整の速さに合わせて大きくする。 標準的な非退化条件の下で、このアルゴリズムはどの標本経路でも実行可能で、実際に到着した要求を後から見て得られる分数解の最適値に対する期待リグレットはO(log T)となる。これは、分布を知り計算資源にも制限のない方策についての下界と一致する。解析では、変化する資源量ごとの最適価格を追跡せず、固定した基準価格の周囲の曲率を在庫の安定性へ結び付ける。数値実験では、RASGDのリグレットは到着ごとに線形計画を解き直す方法に匹敵し、比較した一次手法を上回った。同時に一次手法の計算効率を保つ。これらの結果は、大規模オンライン線形計画で高品質な配分を計算効率よく実現する方法としてRASGDを位置付ける。

v1の要旨から自動生成。本文の精読・人による確認は未実施。

初稿
2026-09-23(UTC)
最新改訂
2026-09-23 · v1
査読・掲載
査読状況未確認
arXivで読むPDF

更新履歴

取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。

原文の要旨

The growth of large language model (LLM) inference and search services increases the scale of online linear programming problems, motivating computationally efficient algorithms. We develop resource-adaptive stochastic gradient descent (RASGD) for stochastic online linear programming. The algorithm uses one request and current inventory to update resource prices, requiring O(m) operations for m resources and memory per arrival and no LP or sample-average optimization. The central idea is to express the current-resource pricing logic of re-solving through a first-order SGD update: each arrival refreshes the remaining-inventory allowance in the dual objective, while the stepsize decreases for early learning and increases later to match the speed of inventory adjustment. Under standard non-degeneracy conditions, our algorithm is feasible on every sample path and achieves O(\log T) expected regret against the realized fractional hindsight optimum, which matches the lower bound, even for policies that know the distribution and have unrestricted computation. The analysis converts curvature around the fixed reference price into inventory stability without tracking optimal prices at changing resource levels. Numerical experiments show that RASGD achieves regret competitive with per-arrival LP re-solving and improves upon the tested first-order baselines, while retaining the computational efficiency of first-order methods. These results establish RASGD as a computationally efficient approach to achieving high allocation quality in large-scale OLP.

arXiv ID: 2609.28263 / 要約の誤りについて