論文の概要: Optimization Frameworks & Learning Algorithms for Discrete-Time Mean Field Games
- arxiv url: http://arxiv.org/abs/2611.01754v1
- Date: Sun, 01 Nov 2026 10:01:19 GMT
- ステータス: 情報取得中
- システム内更新日: 2026-11-03 20:04:44.01536
- Title: Optimization Frameworks & Learning Algorithms for Discrete-Time Mean Field Games
- Title(参考訳): 離散時間平均フィールドゲームのための最適化フレームワークと学習アルゴリズム
- Abstract要約: モノグラフは平均場ナッシュ均衡の概念を発展させ、適切な仮定の下で存在と特異性を確立し、また、大きな有限プレイヤゲームにおいて平均場平衡が近似平衡をどのように得るかを説明する。
数値的な例は、群衆の動き、交通経路、疫病管理、および多重平衡の計算を描いている。
- 参考スコア(独自算出の注目度): 4.889193693611269
- License:
- Abstract: This monograph introduces discrete-time mean field games with finite state and action spaces, emphasizing optimization formulations and learning algorithms. Starting from Markov decision processes and finite-player stochastic games, it develops the notion of mean field Nash equilibrium, establishes existence and uniqueness results under suitable assumptions, and explains how mean field equilibria yield approximate equilibria in large finite-player games. Building on the linear programming formulation of Markov decision processes, occupation measures and primal-dual formulations connect equilibrium computation with mathematical optimization. The monograph presents fixed-point iterations, fictitious play, online mirror descent, and optimization-based methods, discussing their convergence properties and limitations. Numerical examples illustrate crowd motion, traffic routing, epidemic management, and the computation of multiple equilibria. It combines examples, theoretical results, and implementable algorithms, with bibliographic notes providing connections to the broader literature.
- Abstract(参考訳): このモノグラフは、有限状態とアクション空間を持つ離散時間平均場ゲームを導入し、最適化の定式化と学習アルゴリズムを強調する。
マルコフ決定過程や有限プレイヤ確率ゲームから始まり、平均場ナッシュ均衡の概念を発展させ、適切な仮定の下で存在と特異性を確立し、また、大きな有限プレイヤゲームにおいて平均場平衡がどのように近似平衡を得るかを説明する。
マルコフ決定過程の線形計画定式化、占領対策、原始双対定式化に基づいて、平衡計算と数学的最適化を結びつける。
モノグラフは固定点反復、架空の遊び、オンラインミラー降下、最適化に基づく手法を提示し、それらの収束特性と制限について議論する。
数値的な例は、群衆の動き、交通経路、疫病管理、および多重平衡の計算を描いている。
これは、例、理論的結果、実装可能なアルゴリズムと、より広範な文献とのつながりを提供する書誌のノートを組み合わせたものである。
関連論文リスト
- Mathematical methods of reinforcement learning [43.355758007172646]
この調査は、強化学習における現代アルゴリズムの設計と解析の基盤となる数学的構造を整理する。
我々はマルコフ決定過程(MDPs)とベルマン作用素から始まり、縮約写像、単調性、固定点理論を強調する。
次に、近似法とマーチンゲール法、凸双対性、および鏡/近距離法を連結する正規化の役割という最適化の観点を開発する。
論文 参考訳(メタデータ) (2026-07-08T02:57:22Z) - Optimal Coarse Correlated Equilibria in Mean Field Games: Linear Programming and No-Regret Learning [0.0]
連続時間平均場ゲームに対する最適粗相関平衡を導入する。
粗相関均衡は、プレイヤーが獲得できないランダム化された推薦スキームである。
我々は、そのような平衡を学習するために、外部回帰制約の等価なラグランジアン定式化に基づいて、非回帰原始双対アルゴリズムを設計する。
論文 参考訳(メタデータ) (2026-06-18T10:35:01Z) - Graphon Mean Field Games with a Representative Player: Analysis and Learning Algorithm [14.647775453098513]
軽度の仮定でグラノン平衡の存在と特異性を証明し、この平衡を用いてネットワーク上の有限プレイヤーゲームに対する近似解を構築することができることを示す。
オンラインのオラクルフリー学習アルゴリズムは平衡を数値的に解くために開発され、その収束のためにサンプル複雑性解析が提供される。
論文 参考訳(メタデータ) (2024-05-08T04:44:16Z) - Distributed Markov Chain Monte Carlo Sampling based on the Alternating
Direction Method of Multipliers [143.6249073384419]
本論文では,乗算器の交互方向法に基づく分散サンプリング手法を提案する。
我々は,アルゴリズムの収束に関する理論的保証と,その最先端性に関する実験的証拠の両方を提供する。
シミュレーションでは,線形回帰タスクとロジスティック回帰タスクにアルゴリズムを配置し,その高速収束を既存の勾配法と比較した。
論文 参考訳(メタデータ) (2024-01-29T02:08:40Z) - Faster Last-iterate Convergence of Policy Optimization in Zero-Sum
Markov Games [63.60117916422867]
本稿では,対戦型マルチエージェントRLの最も基本的な設定,すなわち2プレーヤゼロサムマルコフゲームに焦点を当てる。
両エージェントから対称更新を施した単一ループポリシー最適化手法を提案し,この手法はエントロピー規則化楽観的乗算重み更新法(OMWU)によって更新される。
我々の収束結果は、最もよく知られた複雑性を改善し、競合するマルコフゲームにおけるポリシー最適化をよりよく理解する。
論文 参考訳(メタデータ) (2022-10-03T16:05:43Z) - A unified stochastic approximation framework for learning in games [82.74514886461257]
ゲームにおける学習の長期的挙動(連続的・有限的)を解析するためのフレキシブルな近似フレームワークを開発する。
提案する分析テンプレートには,勾配に基づく手法,有限ゲームでの学習のための指数的/乗算的重み付け,楽観的および帯域的変異など,幅広い一般的な学習アルゴリズムが組み込まれている。
論文 参考訳(メタデータ) (2022-06-08T14:30:38Z) - Optimal Algorithms for Decentralized Stochastic Variational Inequalities [113.43047601775453]
この作業は、ますます重要になるが十分に理解されていない分散的な設定に集中する。
通信と局所的な繰り返しの両方の下位境界を示し、これらの下位境界に一致する最適なアルゴリズムを構築する。
我々のアルゴリズムは、分散化されたケースだけでなく、決定論的で非分散的な文献でも利用できる。
論文 参考訳(メタデータ) (2022-02-06T13:14:02Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。