論文の概要: Linear Last-Iterate Convergence Rates for Optimistic Learning in Harmonic Games
- arxiv url: http://arxiv.org/abs/2610.18560v1
- Date: Tue, 13 Oct 2026 15:32:10 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-16 20:39:43.1644
- Title: Linear Last-Iterate Convergence Rates for Optimistic Learning in Harmonic Games
- Title(参考訳): 高調波ゲームにおける最適学習のための線形最終Iterate Convergence Rate
- Abstract要約: 我々は,マルチプレイヤーハーモニックゲームにおいて,オプティミスティック・フォロー・ザ・レギュラライズド・リーダの最後の繰り返しが線形速度でナッシュ平衡に収束することを証明した。
この結果から,エントロピー,ツァリ,ログバリアなど多種多様な正規化要因が得られた。
- 参考スコア(独自算出の注目度): 36.91864630066615
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: We prove that the last iterate of Optimistic Follow-The-Regularized-Leader (OFTRL) converges at a linear rate to a Nash equilibrium in multiplayer harmonic games. Our result holds under a mild game-regularity condition and for a large family of regularizers, including entropy, Tsallis, and log-barrier. Our analysis is based on a dual perspective of OFTRL: we prove that the interaction between optimism and the global structure of harmonic games leads to the dissipation of an energy function along the dual iterates, for which we establish tight quantitative bounds. Our result also holds for the Extragradient FTRL variant.
- Abstract(参考訳): 我々は,OFTRL(Optimistic Follow-The-Regularized-Leader)の最後の繰り返しが,マルチプレイヤーハーモニックゲームにおけるナッシュ平衡に線形に収束することを証明する。
この結果から,エントロピー,ツァリ,ログバリアなど多種多様な正規化要因が得られた。
我々の分析はOFTRLの双対的な視点に基づいており、楽観主義と調和ゲームのグローバルな構造の間の相互作用が双対イテレートに沿ったエネルギー関数の散逸につながることを証明し、そこで厳密な量的境界を確立する。
また,FTRLのエクストラグラディエント変種についても検討した。
関連論文リスト
- Stochastic Optimization Under Power-Law Spectra: Tight Bounds and Shuffling Analysis [54.1075866464923]
近年の研究では、データに対するパワーロースペクトル条件は、決定論的勾配勾配の厳密な収束境界を可能にすることが確認されている。
この結果を高次元機械学習の体制に拡張する。
我々の結果は、抽象スペクトル理論と実践的な訓練選択のギャップを埋め、データの最適化速度の統一的な画像を提供する。
論文 参考訳(メタデータ) (2026-09-28T21:01:43Z) - On the Power of Perturbation under Sampling in Solving Extensive-Form Games [56.013335390600524]
本研究では, サンプリング対象の広義ゲームにおいて, 摂動がいかにしてFTRL(Follow-the-Regularized-Leader)アルゴリズムを改良するかを検討する。
我々は、textitPerturbed FTRLアルゴリズムの統一フレームワークを提案し、PFTRL-KLとPFTRL-RKLの2つの変種について検討する。
論文 参考訳(メタデータ) (2025-01-28T00:29:38Z) - Faster Last-iterate Convergence of Policy Optimization in Zero-Sum
Markov Games [63.60117916422867]
本稿では,対戦型マルチエージェントRLの最も基本的な設定,すなわち2プレーヤゼロサムマルコフゲームに焦点を当てる。
両エージェントから対称更新を施した単一ループポリシー最適化手法を提案し,この手法はエントロピー規則化楽観的乗算重み更新法(OMWU)によって更新される。
我々の収束結果は、最もよく知られた複雑性を改善し、競合するマルコフゲームにおけるポリシー最適化をよりよく理解する。
論文 参考訳(メタデータ) (2022-10-03T16:05:43Z) - Mutation-Driven Follow the Regularized Leader for Last-Iterate
Convergence in Zero-Sum Games [8.347058637480506]
正規化リーダ(FTRL)のフォローは、戦略を時分割する際にナッシュ均衡に収束することが保証される。
FTRL(M-FTRL)は,行動確率の摂動に対する突然変異を導入するアルゴリズムである。
論文 参考訳(メタデータ) (2022-06-18T17:32:07Z) - LEAD: Min-Max Optimization from a Physical Perspective [11.808346987640855]
GAN(Generative Adversarial Network)のような敵の定式化は、2プレイヤーのmin-maxゲームへの関心を再燃させた。
そのようなゲームの最適化における中心的な障害は、それらの収束を妨げる回転力学である。
ゲーム最適化は,複数の力の対象となる粒子システムと動的特性を共有できることを示す。
論文 参考訳(メタデータ) (2020-10-26T19:01:49Z) - Linear Last-iterate Convergence in Constrained Saddle-point Optimization [48.44657553192801]
我々は、OGDA(Optimistic Gradient Descent Ascent)とOMWU(Optimistic Multiplicative Weights Update)に対する最終段階の独特さの理解を著しく拡大する。
平衡が一意である場合、線形終端収束は、値が普遍定数に設定された学習速度で達成されることを示す。
任意のポリトープ上の双線型ゲームがこの条件を満たすことを示し、OGDAは一意の平衡仮定なしで指数関数的に高速に収束することを示した。
論文 参考訳(メタデータ) (2020-06-16T20:53:04Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。