論文の概要: Equivariance by Contrast: Identifiable Equivariant Embeddings from Unlabeled Finite Group Actions
- arxiv url: http://arxiv.org/abs/2510.21706v1
- Date: Fri, 24 Oct 2025 17:59:46 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-10-28 09:00:15.567873
- Title: Equivariance by Contrast: Identifiable Equivariant Embeddings from Unlabeled Finite Group Actions
- Title(参考訳): コントラストによる等変性:未ラベル有限群作用から同定可能な等変埋め込み
- Authors: Tobias Schmidt, Steffen Schneider, Matthias Bethge,
- Abstract要約: 観測対$(mathbfy, g cdot mathbfy)$から同変埋め込みを学び、データに作用する有限群から$g$が引き出される。
提案手法は,群作用が可逆線型写像に対応する潜在空間と群表現を共同で学習する。
- 参考スコア(独自算出の注目度): 18.11344454990819
- License: http://creativecommons.org/licenses/by-sa/4.0/
- Abstract: We propose Equivariance by Contrast (EbC) to learn equivariant embeddings from observation pairs $(\mathbf{y}, g \cdot \mathbf{y})$, where $g$ is drawn from a finite group acting on the data. Our method jointly learns a latent space and a group representation in which group actions correspond to invertible linear maps -- without relying on group-specific inductive biases. We validate our approach on the infinite dSprites dataset with structured transformations defined by the finite group $G:= (R_m \times \mathbb{Z}_n \times \mathbb{Z}_n)$, combining discrete rotations and periodic translations. The resulting embeddings exhibit high-fidelity equivariance, with group operations faithfully reproduced in latent space. On synthetic data, we further validate the approach on the non-abelian orthogonal group $O(n)$ and the general linear group $GL(n)$. We also provide a theoretical proof for identifiability. While broad evaluation across diverse group types on real-world data remains future work, our results constitute the first successful demonstration of general-purpose encoder-only equivariant learning from group action observations alone, including non-trivial non-abelian groups and a product group motivated by modeling affine equivariances in computer vision.
- Abstract(参考訳): コントラスト (EbC) による等変埋め込みを観測対 $(\mathbf{y}, g \cdot \mathbf{y})$ から学習するために、データに作用する有限群から$g$ が引き出される。
提案手法は,群固有の帰納バイアスに頼らずに,加群作用が可逆線型写像に対応する潜在空間と群表現を共同で学習する。
有限群 $G:= (R_m \times \mathbb{Z}_n \times \mathbb{Z}_n)$ で定義される構造化変換を持つ無限dSpritesデータセットに対するアプローチを検証する。
結果として得られる埋め込みは高忠実度同値であり、群演算は潜在空間で忠実に再現される。
合成データでは、非アーベル直交群 $O(n)$ および一般線型群 $GL(n)$ に対するアプローチをさらに検証する。
また、同定可能性に関する理論的証明も提供する。
実世界のデータにおける多種多様なグループタイプに対する幅広い評価は今後も継続されるが、コンピュータビジョンにおけるアフィンの等式をモデル化した製品群を含む、集団行動観察のみによる汎用エンコーダのみの同変学習の実証が成功している最初の例である。
関連論文リスト
- Lie Group Decompositions for Equivariant Neural Networks [12.139222986297261]
コンボリューションカーネルをパラメータ化してアフィン変換に対する同変モデルを構築する方法を示す。
我々は,ベンチマークアフィン不変分類タスクにおいて,モデルのロバスト性と分布外一般化能力を評価する。
論文 参考訳(メタデータ) (2023-10-17T16:04:33Z) - Deep Learning Symmetries and Their Lie Groups, Algebras, and Subalgebras
from First Principles [55.41644538483948]
ラベル付きデータセットに存在する連続した対称性群の検出と同定のためのディープラーニングアルゴリズムを設計する。
完全に接続されたニューラルネットワークを用いて、変換対称性と対応するジェネレータをモデル化する。
また,Lie群とその性質の数学的研究に機械学習アプローチを使うための扉を開く。
論文 参考訳(メタデータ) (2023-01-13T16:25:25Z) - Equivariant Representation Learning in the Presence of Stabilizers [13.11108596589607]
EquIN は自由でない群作用、すなわち非自明な対称性によってデータを安定化する群作用に適している。
EquIN は理論上、群論の軌道安定化定理に基礎を置いている。
論文 参考訳(メタデータ) (2023-01-12T11:43:26Z) - Commutative Lie Group VAE for Disentanglement Learning [96.32813624341833]
本研究では,データに表される因子の変動を同変的に反映する基盤構造を見いだすこととして,非絡み合い学習を考察する。
グループベースの非絡み合い学習を実現するために、Communative Lie Group VAEというシンプルなモデルが導入された。
実験により,本モデルでは,教師なしの非絡み合い表現を効果的に学習し,余分な制約を伴わずに最先端のパフォーマンスを達成できることが示されている。
論文 参考訳(メタデータ) (2021-06-07T07:03:14Z) - A Practical Method for Constructing Equivariant Multilayer Perceptrons
for Arbitrary Matrix Groups [115.58550697886987]
行列群の同変層を解くための完全一般的なアルゴリズムを提供する。
他作品からのソリューションを特殊ケースとして回収するだけでなく、これまで取り組んだことのない複数のグループと等価な多層パーセプトロンを構築します。
提案手法は, 粒子物理学および力学系への応用により, 非同変基底線より優れる。
論文 参考訳(メタデータ) (2021-04-19T17:21:54Z) - On the geometric and Riemannian structure of the spaces of group
equivariant non-expansive operators [0.0]
群同変非拡張作用素は、最近、トポロジカルデータ解析とディープラーニングの基本的な構成要素として提案されている。
群同変非拡大作用素の空間 $mathcalF$ がリーマン多様体の構造によってどのように与えられるかを示す。
また、検討された多様体において、代表群同変非拡大作用素の有限集合を選択する手順も記述する。
論文 参考訳(メタデータ) (2021-03-03T17:29:25Z) - GroupifyVAE: from Group-based Definition to VAE-based Unsupervised
Representation Disentanglement [91.9003001845855]
他の誘導バイアスを導入しないと、VAEベースの非監視的非絡み合いは実現できない。
グループ理論に基づく定義から導かれる制約を非確率的帰納的バイアスとして活用し,vaeに基づく教師なし不連続に対処する。
提案手法の有効性を検証するために,5つのデータセット上で,vaeベースモデルが最も目立つ1800モデルをトレーニングした。
論文 参考訳(メタデータ) (2021-02-20T09:49:51Z) - LieTransformer: Equivariant self-attention for Lie Groups [49.9625160479096]
群等価ニューラルネットワークは群不変ニューラルネットワークの構成要素として用いられる。
我々は、文学の範囲を、ディープラーニングモデルの顕著な構築ブロックとして現れつつある自己注意にまで広げる。
任意のリー群とその離散部分群に同値なリー自己結合層からなる構造であるリー変換器を提案する。
論文 参考訳(メタデータ) (2020-12-20T11:02:49Z) - Stochastic Flows and Geometric Optimization on the Orthogonal Group [52.50121190744979]
直交群 $O(d)$ 上の幾何駆動最適化アルゴリズムの新しいクラスを示す。
提案手法は,深層,畳み込み,反復的なニューラルネットワーク,強化学習,フロー,メトリック学習など,機械学習のさまざまな分野に適用可能であることを示す。
論文 参考訳(メタデータ) (2020-03-30T15:37:50Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。