論文の概要: Equivariant bifurcation, quadratic equivariants, and symmetry breaking
for the standard representation of $S_n$
- arxiv url: http://arxiv.org/abs/2107.02422v1
- Date: Tue, 6 Jul 2021 06:43:06 GMT
- ステータス: 処理完了
- システム内更新日: 2021-07-07 13:35:04.550037
- Title: Equivariant bifurcation, quadratic equivariants, and symmetry breaking
for the standard representation of $S_n$
- Title(参考訳): S_n$の標準表現に対する等変分岐、二次同変、対称性の破れ
- Authors: Yossi Arjevani and Michael Field
- Abstract要約: 浅層学習者ニューラルネットワークの研究から発せられる質問に動機付けられ、ニューラルネットワークに関連する同変ダイナミクスのクラスにおいて、スパイラス・ミニマの分析法が開発されている。
突発性ミニマは自然対称性の破れから生じるのではなく、より一般的な$S_n$-equivariantの分岐によって符号化できるランドスケープ幾何学の複雑な変形によって生じる。
二次同変が存在する場合の一般分岐の結果も証明され、この研究はIhrig & Golubitsky と Chossat, Lauterback & の結果を拡張し、明らかにする。
- 参考スコア(独自算出の注目度): 15.711517003382484
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Motivated by questions originating from the study of a class of shallow
student-teacher neural networks, methods are developed for the analysis of
spurious minima in classes of gradient equivariant dynamics related to neural
nets. In the symmetric case, methods depend on the generic equivariant
bifurcation theory of irreducible representations of the symmetric group on $n$
symbols, $S_n$; in particular, the standard representation of $S_n$. It is
shown that spurious minima do not arise from spontaneous symmetry breaking but
rather through a complex deformation of the landscape geometry that can be
encoded by a generic $S_n$-equivariant bifurcation. We describe minimal models
for forced symmetry breaking that give a lower bound on the dynamic complexity
involved in the creation of spurious minima when there is no symmetry. Results
on generic bifurcation when there are quadratic equivariants are also proved;
this work extends and clarifies results of Ihrig & Golubitsky and Chossat,
Lauterback & Melbourne on the instability of solutions when there are quadratic
equivariants.
- Abstract(参考訳): 浅い生徒-教師ニューラルネットワークのクラスの研究から生まれた疑問に動機づけられ、ニューラルネットワークに関連する勾配同変ダイナミクスのクラスにおけるスプリアスミニマの分析法を開発した。
対称の場合、手法は対称群の$n$記号上の既約表現のジェネリック同変分岐理論(英語版)(generic equivariant bifurcation theory)に依存し、特に、$s_n$の標準表現は$s_n$である。
突発性ミニマは自然対称性の破れから生じるのではなく、より一般的な$S_n$-equivariantの分岐によって符号化できるランドスケープ幾何学の複雑な変形によって生じる。
我々は、対称性が存在しないときの急激なミニマムの生成に関わる動的複雑性の低い境界を与える強制対称性破壊の最小モデルを記述する。
この研究は、二次同変が存在するときの解の不安定性に関するIhrig & Golubitsky と Chossat, Lauterback & Melbourne の結果を拡張し、明らかにする。
関連論文リスト
- Equivariant score-based generative models provably learn distributions with symmetries efficiently [7.90752151686317]
実験的な研究により、対称性を生成モデルに組み込むことで、より優れた一般化とサンプリング効率が得られることが示されている。
我々は,ある群対称性に対して不変な分布を学習するためのスコアベース生成モデル(SGM)の最初の理論的解析と保証を提供する。
論文 参考訳(メタデータ) (2024-10-02T05:14:28Z) - Relative Representations: Topological and Geometric Perspectives [53.88896255693922]
相対表現はゼロショットモデルの縫合に対する確立されたアプローチである。
相対変換において正規化手順を導入し、非等方的再スケーリングや置換に不変となる。
第二に、クラス内のクラスタリングを促進するトポロジカル正規化損失である、微調整された相対表現におけるトポロジカルデシフィケーションの展開を提案する。
論文 参考訳(メタデータ) (2024-09-17T08:09:22Z) - Equivariant Manifold Neural ODEs and Differential Invariants [1.6073704837297416]
我々は同変多様体ニューラル常微分方程式(NODE)の明らかな幾何学的枠組みを開発する。
私たちは、対称データに対するモデリング能力を解析するためにそれを使用します。
論文 参考訳(メタデータ) (2024-01-25T12:23:22Z) - Symmetry Breaking and Equivariant Neural Networks [17.740760773905986]
我々は「緩和された同注入」という新しい概念を導入する。
我々は、この緩和を同変多層パーセプトロン(E-MLP)に組み込む方法を示す。
対称性の破れの関連性は、様々な応用領域で議論される。
論文 参考訳(メタデータ) (2023-12-14T15:06:48Z) - Evaluating the Robustness of Interpretability Methods through
Explanation Invariance and Equivariance [72.50214227616728]
解釈可能性法は、それらの説明が説明されたモデルを忠実に記述した場合にのみ有用である。
特定の対称性群の下で予測が不変であるニューラルネットワークを考える。
論文 参考訳(メタデータ) (2023-04-13T17:59:03Z) - Deep Learning Symmetries and Their Lie Groups, Algebras, and Subalgebras
from First Principles [55.41644538483948]
ラベル付きデータセットに存在する連続した対称性群の検出と同定のためのディープラーニングアルゴリズムを設計する。
完全に接続されたニューラルネットワークを用いて、変換対称性と対応するジェネレータをモデル化する。
また,Lie群とその性質の数学的研究に機械学習アプローチを使うための扉を開く。
論文 参考訳(メタデータ) (2023-01-13T16:25:25Z) - Equivariant Disentangled Transformation for Domain Generalization under
Combination Shift [91.38796390449504]
ドメインとラベルの組み合わせは、トレーニング中に観察されるのではなく、テスト環境に現れる。
我々は、同型の概念、同値性、および整合性の定義に基づく結合シフト問題の一意的な定式化を提供する。
論文 参考訳(メタデータ) (2022-08-03T12:31:31Z) - Non-local order parameters for fermion chains via the partial transpose [0.0]
本稿では,反単位対称性によって定義される非局所順序パラメータを提案する。
行列積状態に対しては、これらの不変量の解釈が提供される。
論文 参考訳(メタデータ) (2022-06-07T13:13:59Z) - Learning Equivariant Energy Based Models with Equivariant Stein
Variational Gradient Descent [80.73580820014242]
本稿では,確率モデルに対称性を組み込むことにより,確率密度の効率的なサンプリングと学習の問題に焦点をあてる。
まず、等変シュタイン変分勾配Descentアルゴリズムを導入する。これは、対称性を持つ密度からサンプリングするスタインの同一性に基づく同変サンプリング法である。
我々はエネルギーベースモデルのトレーニングを改善し、スケールアップする新しい方法を提案する。
論文 参考訳(メタデータ) (2021-06-15T01:35:17Z) - Geometric Deep Learning and Equivariant Neural Networks [0.9381376621526817]
幾何学的深層学習の数学的基礎を調査し,群同変とゲージ同変ニューラルネットワークに着目した。
任意の多様体 $mathcalM$ 上のゲージ同変畳み込みニューラルネットワークを、構造群 $K$ の主バンドルと、関連するベクトルバンドルの切断間の同変写像を用いて開発する。
セマンティックセグメンテーションやオブジェクト検出ネットワークなど,このフォーマリズムのいくつかの応用を解析する。
論文 参考訳(メタデータ) (2021-05-28T15:41:52Z) - Generalized string-nets for unitary fusion categories without
tetrahedral symmetry [77.34726150561087]
任意の多重度自由なユニタリ融合圏に対するLevin-Wenモデルの構築について述べる。
我々はハミルトニアンの行列要素を明示的に計算し、さらに元の要素と同じ性質を持つことを示す。
論文 参考訳(メタデータ) (2020-04-15T12:21:28Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。