論文の概要: Entropy-Regularized Mean-Field Games with Average-Reward Criterion: Span-Seminorm Contractions and Model-Free Learning
- arxiv url: http://arxiv.org/abs/2610.15871v1
- Date: Sun, 11 Oct 2026 19:43:48 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-19 15:33:20.177527
- Title: Entropy-Regularized Mean-Field Games with Average-Reward Criterion: Span-Seminorm Contractions and Model-Free Learning
- Title(参考訳): 平均逆条件付きエントロピー規則化平均場ゲーム:スパンセミノルム契約とモデル自由学習
- Abstract要約: 平均逆条件下で有限状態および作用空間を持つ定常平均場ゲームについて検討する。
半ノルムにおけるソフトQ-ラーニングのための有限サンプル境界を温度非依存定数で証明し、学習された人口分布と政策に対する収束率を導出する。
- 参考スコア(独自算出の注目度): 2.6132365604376404
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We study stationary discrete-time mean-field games with finite state and action spaces under the average-reward criterion, with an entropy-regularized objective and population-dependent dynamics and rewards. Under a minorization condition, the soft Q-operator is a span-seminorm contraction for the full transition kernel, so relative value iteration does not require the minorizing measure. When the Lipschitz constant of the kernel is below the minorization mass and the temperature exceeds an explicit threshold, the equilibrium fixed-point operator is a contraction: an equilibrium exists, its population distribution is unique, and a fixed-point iteration converges to it geometrically. We then learn the equilibrium model-free from a simulator, combining soft Q-learning at a fixed population distribution with an empirical transition kernel. We prove a finite-sample bound for soft Q-learning in the span seminorm, with temperature-independent constants, and derive convergence rates for the learned population distribution and policy. A congestion-aware routing game illustrates the results.
- Abstract(参考訳): 本研究では, 平均回帰基準の下で, 有限状態および作用空間を有する定常離散時間平均場ゲームについて, エントロピー正規化目標と人口依存ダイナミクスと報酬を用いて検討する。
マイナー化条件下では、ソフトQ-演算子は全遷移カーネルのスパンセミノルム縮約であるので、相対値反復はマイナー化測度を必要としない。
核のリプシッツ定数が偏化質量以下で温度が明示しきい値を超えるとき、平衡不動点作用素は収縮である:平衡が存在し、その集団分布はユニークで、不動点反復は幾何学的に収束する。
次に,固定人口分布におけるソフトQ-ラーニングと経験的遷移カーネルを組み合わせることで,シミュレータから平衡モデルフリーを学習する。
半ノルムにおけるソフトQ-ラーニングのための有限サンプル境界を温度非依存定数で証明し、学習された人口分布と政策に対する収束率を導出する。
渋滞対応ルーティングゲームは結果を示す。
関連論文リスト
- Non-reciprocally interacting Ornstein-Uhlenbeck processes: Exceptional points, Anomalous relaxation, Pseudo-equilibrium and Boundary refrigeration [0.0]
我々は、調整可能な非相互パラメータg$で支配される非相互相互作用Ornstein-Uhlenbeck(NROU)モデルの階層を導入する。
乱れモデルに対して、障害実現におけるEP位置の分布$g*$は、クリーンシステムEPにおいて、正確に普遍的なエッジを発達させることを示す。
境界粒子が非相反性として熱く作用するのを冷蔵に切り替える境界冷却効果を明らかにする。
論文 参考訳(メタデータ) (2026-09-04T17:41:56Z) - Scalable Lindblad Noise Learning via Stochastic Tensor-Network Simulation [48.887627688666974]
大規模オープン量子システムにおける学習散逸率は、短期量子技術の大きな障害である。
本稿では,シミュレーション手法であるJump Method(TJM)を組み合わせたLindblad散逸率のスケーラブルなノイズ学習フレームワークを提案する。
我々は,Isingモデルにおける2つのノイズモデルに対するアプローチを実証し,各サイトについて,N_mathrmsite=16$まで独立散逸率を学習した。
スケーラブルな数値と厳密な理論的保証の組み合わせは、TJMベースのノイズ学習を大きな量子デバイスにおける散逸を特徴づける実用的な基礎として位置づけている。
論文 参考訳(メタデータ) (2026-08-25T15:07:11Z) - Fixed Points Without Fixed Diffusion: Implicit Neural Sheaves for Convergent Test-Time Computation [3.402787708517185]
Implicit Graph Neural Networks (IGNN) は、ノード表現をメッセージパッシング演算子の固定点として定義する。
適応型ニューラル・シーフ伝搬を持つ不均質な深層平衡アーキテクチャであるSheafDEQを紹介する。
論文 参考訳(メタデータ) (2026-08-12T21:48:07Z) - Global Convergence of Gradient Descent for Score Matching in Gaussian Mixtures via Reverse Fisher Divergence [67.12978375116599]
そこで本研究では,学生分布に対する期待値の逆のフィッシャー発散(Fisher divergence)について検討する。
我々は、目標平均に対して$widetilde(1)$-separationの仮定の下で、大域収束保証を証明した。
我々はリアプノフに基づく勾配勾配勾配の動的解析を頼りにしており、逆のフィッシャー発散は前方のフィッシャー発散よりもはるかに良い最適化環境を持つことが示されている。
論文 参考訳(メタデータ) (2026-06-18T07:34:33Z) - A Note on Stability for Orthogonalized Matrix Momentum with Client Sampling [7.035974899001363]
我々は, 隣接再帰安定性と重み付き濃度ステップから, 有限ラウンド上尾保証を導出した。
一次元の反例は、なぜギャップ、平滑化、あるいは正則性条件が必要なのかを示す。
論文 参考訳(メタデータ) (2026-06-01T05:36:26Z) - Stability and Generalization of Push-Sum Based Decentralized Optimization over Directed Graphs [55.77845440440496]
プッシュベースの分散通信は、情報交換が非対称である可能性のある通信ネットワークの最適化を可能にする。
我々は、グラディエント・プッシュ(SGP)アルゴリズムのための統一的な一様安定性フレームワークを開発する。
重要な技術的要素は、2つの量に束縛された不均衡認識の一般化である。
論文 参考訳(メタデータ) (2026-02-24T05:32:03Z) - Stabilizing Fixed-Point Iteration for Markov Chain Poisson Equations [49.702772230127465]
有限状態マルコフ鎖を$n$状態と遷移行列$P$で研究する。
すべての非退化モードが実周辺不変部分空間 $mathcalK(P)$ によってキャプチャされ、商空間 $mathbbRn/mathcalK(P) 上の誘導作用素が厳密に収縮し、ユニークな商解が得られることを示す。
論文 参考訳(メタデータ) (2026-01-31T02:57:01Z) - Operational entanglement of collective quantum modes at room temperature [1.5755923640031846]
集合量子モードの絡み合いは、微視的な熱平衡ではなく、開系チャネルの縮小によって制御されることを示す。
本研究は,群集モードのダイナミックス,ノイズ注入,距離,およびマクロエンタングルメントの運用証明を結合する,最小限のプラットフォームに依存しないフレームワークを構築した。
論文 参考訳(メタデータ) (2025-12-27T09:27:46Z) - Adaptive Annealed Importance Sampling with Constant Rate Progress [68.8204255655161]
Annealed Importance Smpling (AIS)は、抽出可能な分布から重み付けされたサンプルを合成する。
本稿では,alpha$-divergencesに対する定数レートAISアルゴリズムとその効率的な実装を提案する。
論文 参考訳(メタデータ) (2023-06-27T08:15:28Z) - On the Convergence of the ELBO to Entropy Sums [3.345575993695074]
変分下界は、すべての定常的な学習点においてエントロピーの和に等しいことを示す。
静止点におけるエントロピー和に対する ELBO の等式を証明することが、この研究の主な貢献である。
論文 参考訳(メタデータ) (2022-09-07T11:33:32Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。