論文の概要: Simultaneous Transport Evolution for Minimax Equilibria on Measures
- arxiv url: http://arxiv.org/abs/2202.06460v1
- Date: Mon, 14 Feb 2022 02:23:16 GMT
- ステータス: 処理完了
- システム内更新日: 2022-02-15 15:36:27.417258
- Title: Simultaneous Transport Evolution for Minimax Equilibria on Measures
- Title(参考訳): 対策におけるミニマックス平衡の同時輸送進化
- Authors: Carles Domingo-Enrich, Joan Bruna
- Abstract要約: 最小限の最適化問題は、敵対的学習や生成的モデリングなど、いくつかの重要な機械学習設定で発生する。
この研究では、代わりに混合平衡を見つけることに集中し、関連する持ち上げ問題を確率測度の空間で考察する。
エントロピー正則化を加えることで、我々の主な成果はグローバル均衡へのグローバル収束を確立する。
- 参考スコア(独自算出の注目度): 48.82838283786807
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Min-max optimization problems arise in several key machine learning setups,
including adversarial learning and generative modeling. In their general form,
in absence of convexity/concavity assumptions, finding pure equilibria of the
underlying two-player zero-sum game is computationally hard [Daskalakis et al.,
2021]. In this work we focus instead in finding mixed equilibria, and consider
the associated lifted problem in the space of probability measures. By adding
entropic regularization, our main result establishes global convergence towards
the global equilibrium by using simultaneous gradient ascent-descent with
respect to the Wasserstein metric -- a dynamics that admits efficient particle
discretization in high-dimensions, as opposed to entropic mirror descent. We
complement this positive result with a related entropy-regularized loss which
is not bilinear but still convex-concave in the Wasserstein geometry, and for
which simultaneous dynamics do not converge yet timescale separation does.
Taken together, these results showcase the benign geometry of bilinear games in
the space of measures, enabling particle dynamics with global qualitative
convergence guarantees.
- Abstract(参考訳): min-max最適化問題は、逆学習や生成モデリングなど、いくつかの重要な機械学習セットアップで発生する。
彼らの一般的な形式では、凸性/凸性仮定がなければ、基礎となる2つのプレイヤーゼロサムゲームの純粋平衡性は計算的に困難である [Daskalakis et al., 2021]。
この研究では、代わりに混合平衡を見つけることに焦点を合わせ、確率測度の空間における関連する持ち上げ問題を考える。
エントロピー正則化を加えることで、我々の主な結果は、エントロピーミラー降下とは対照的に、高次元における効率的な粒子の離散化を許容するダイナミクスであるワッサーシュタイン計量に対して、同時勾配の漸近線を用いて、大域的平衡に対する大域的収束を確立する。
この正の結果は、ワッサーシュタイン幾何学において双線型ではないが凸凹であるエントロピー正規化損失(entropy-regularized loss)を補うものであり、同時ダイナミクスは収束しないが時間スケール分離は成立しない。
これらの結果は、測度空間における双線型ゲームの良性幾何を示し、大域的な定性的収束を保証する粒子動力学を可能にする。
関連論文リスト
- Modeling the space-time correlation of pulsed twin beams [68.8204255655161]
パラメトリックダウンコンバージョンによって生成される絡み合ったツインビームは、画像指向アプリケーションで好まれるソースである。
本研究では,時間消費数値シミュレーションと非現実的な平面波ポンプ理論のギャップを埋めることを目的とした半解析モデルを提案する。
論文 参考訳(メタデータ) (2023-01-18T11:29:49Z) - Slow semiclassical dynamics of a two-dimensional Hubbard model in
disorder-free potentials [77.34726150561087]
調和およびスピン依存線形ポテンシャルの導入は、fTWAを長期間にわたって十分に検証することを示した。
特に、有限2次元系に着目し、中間線形ポテンシャル強度において、高調波ポテンシャルの追加と傾きのスピン依存が、亜拡散力学をもたらすことを示す。
論文 参考訳(メタデータ) (2022-10-03T16:51:25Z) - A note on large deviations for interacting particle dynamics for finding
mixed equilibria in zero-sum games [0.0]
連続ミニマックスゲームにおける平衡点の発見は、機械学習において重要な問題となっている。
最近の発展は純平衡から混合平衡点に焦点を移している。
本研究では,粒子の数が無限に増加するにつれて,粒子系の経験的測定の順序が大きな偏差原理を満たすことを示す。
論文 参考訳(メタデータ) (2022-06-30T10:29:21Z) - Global Convergence of Over-parameterized Deep Equilibrium Models [52.65330015267245]
ディープ均衡モデル(Deep equilibrium model, DEQ)は、入射を伴う無限深度重み付きモデルの平衡点を通して暗黙的に定義される。
無限の計算の代わりに、ルートフィンディングで直接平衡点を解き、暗黙の微分で勾配を計算する。
本稿では,無限深度重み付きモデルの非漸近解析における技術的困難を克服する新しい確率的枠組みを提案する。
論文 参考訳(メタデータ) (2022-05-27T08:00:13Z) - Mesoscopic M\"obius ladder lattices as non-Hermitian model systems [0.0]
メソスコピックシステムにおける非エルミート物理学の2つの実現に焦点を当てる。
まず,非エルミート的な振舞いを誘発する渦巻き型光学マイクロキャビティについて考察する。
第二に、パリティ時間(PT)対称なラダー格子に対して、円とM"ビウス測度を比較する。
論文 参考訳(メタデータ) (2022-05-03T17:10:36Z) - Dynamics of charge-imbalance-resolved entanglement negativity after a
quench in a free-fermion model [0.0]
我々は, 電荷不均衡を解消した負性率の時間的変化を, 大域的クエンチ後に検討した。
我々は、荷電R'enyi対数ネガティビティの動力学の式を導出し、予想する。
論文 参考訳(メタデータ) (2022-02-10T20:25:24Z) - Geometric phase in a dissipative Jaynes-Cummings model: theoretical
explanation for resonance robustness [68.8204255655161]
我々は、ユニタリモデルと散逸型Jaynes-Cummingsモデルの両方で得られた幾何位相を計算する。
散逸モデルでは、非単体効果は、空洞壁を通る光子の流出から生じる。
幾何学的位相が堅牢であることを示し、非単体進化の下で消滅する補正を示す。
論文 参考訳(メタデータ) (2021-10-27T15:27:54Z) - Diffusive-to-ballistic crossover of symmetry violation in open many-body
systems [0.0]
量子多体系における対称性違反のダイナミクスについて、わずかにコヒーレントな(強度$lambda$)あるいは局所的および大域的対称性の非コヒーレントな破れについて検討する。
対称性の破れは, 拡散が長い時間で支配される前に, 発散時の拡散挙動から, 中間時間における弾道的, 超弾道的スケーリングまで, 拡散成長のクロスオーバーにつながることを示す。
論文 参考訳(メタデータ) (2020-09-30T18:00:00Z) - A mean-field analysis of two-player zero-sum games [46.8148496944294]
混合ナッシュ平衡はより一般的に存在し、ミラー降下によって見られる。
我々は、この力学をワッサーシュタイン-フィッシャー-ラオ計量によって与えられる測度空間上の相互作用する勾配流として研究する。
本手法は高次元の混合平衡を同定し, GANの混合の訓練に有効であることを示す。
論文 参考訳(メタデータ) (2020-02-14T22:46:35Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。