論文の概要: Commutator-Induced Uncertainty in VAEs
- arxiv url: http://arxiv.org/abs/2605.23449v1
- Date: Fri, 22 May 2026 10:03:46 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-05-25 17:29:20.302362
- Title: Commutator-Induced Uncertainty in VAEs
- Title(参考訳): VAEにおける通勤者による不確実性
- Authors: Tahereh Dehdarirad, Michael Felsberg, Gabriel Eilertsen, Ziliang Xiong,
- Abstract要約: 変分オートエンコーダ(VAE)は、学習された潜在空間における非可換構造を表現するのにしばしば苦労する。
我々は不確実性に関する幾何学的視点と代数的視点を組み合わせたリー群VAEフレームワークを導入する。
dSprites, 3DShapes, 3DCars, CelebAのフレームワークを, 汎用的および対称性を考慮したベースラインに対して評価した。
- 参考スコア(独自算出の注目度): 20.84327211490012
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Variational autoencoders (VAEs) often struggle to represent non-commutative structure in learned latent spaces. Symmetry-aware VAEs commonly address this issue by enforcing commutativity through algebraic regularization, which is appropriate for commutative transformation groups but can suppress meaningful non-commutative structure when it is intrinsic to the data. We argue that non-commutativity should instead be explicitly diagnosed and reflected in reconstruction behavior. We introduce a Lie Group VAE framework that combines geometric and algebraic perspectives on uncertainty while separating discrete generative factors from continuous geometric transformations. In a first phase, the model is trained without structural constraints while algebraic non-commutativity is measured through finite Baker-Campbell-Hausdorff deviations and decoder order sensitivity is measured through reconstruction order-swap tests. These diagnostics reveal a scale mismatch between latent non-commutativity and reconstruction behavior under unconstrained training. In a second phase, we introduce a deformation-stability constraint with a data-driven calibration constant that aligns decoder sensitivity with algebraic non-commutativity. We evaluate the framework on dSprites, 3DShapes, 3DCars, and CelebA against generic and symmetry-aware baselines, including beta-VAE, CLG-VAE, and CFASL. Across synthetic benchmarks, the method improves reconstruction quality and yields decoder-level behavior more consistent with latent non-commutative structure. Qualitative analyses show clearer order-dependent latent compositions and more stable reconstructions. On CelebA, the model yields more faithful reconstructions and factor-specific latent traversals than CFASL, while also exhibiting meaningful order-dependent interactions between learned latent directions.
- Abstract(参考訳): 変分オートエンコーダ(VAE)は、学習された潜在空間における非可換構造を表現するのにしばしば苦労する。
対称性を意識したVAEは、可換変換群に適した代数正則化を通じて可換性を強制することによってこの問題に対処するが、データに固有の場合、意味のない非可換構造を抑えることができる。
我々は、非可換性は明示的に診断され、再構築行動に反映されるべきであると主張する。
連続幾何変換から離散生成因子を分離しながら不確実性に関する幾何学的および代数的視点を組み合わせたリー群VAEフレームワークを導入する。
第1段階では、モデルは構造的制約なしに訓練されるが、代数的非可換性は有限のベーカー・カンプベル・ハウスドルフ偏差によって測定され、デコーダの順序感度は再構成順序スワップ試験によって測定される。
これらの診断は、非可換性の潜伏と非拘束トレーニング時の再建行動のスケールミスマッチを明らかにする。
第2のフェーズでは、デコーダ感度を代数的非可換性に整合させるデータ駆動キャリブレーション定数を持つ変形安定性制約を導入する。
そこで我々は,dSprites,3DShapes,3DCars,CelebAのフレームワークをβ-VAE,CLG-VAE,CFASLを含む汎用的および対称性を考慮したベースラインに対して評価した。
合成ベンチマーク全体を通して、この手法は再構成品質を改善し、遅延非可換構造とより整合したデコーダレベルの振舞いを得る。
定性的分析は、より明確な順序依存の潜伏成分とより安定した再構成を示す。
CelebA では、CFASL よりも忠実な再構成と因子特異的潜行が得られ、学習された潜行方向間の有意義な順序依存的な相互作用を示す。
関連論文リスト
- Gauge-Equivariant Intrinsic Neural Operators for Geometry-Consistent Learning of Elliptic PDE Maps [0.0]
幾何偏微分方程式(PDE)に対するゲージ同変固有ニューラル演算子(GINO)を提案する。
GINOは、幾何依存スペクトルに作用する固有スペクトル乗法を通して楕円解をパラメータ化し、ゲージ-等変非線形性と結合する。
我々は, GINO が低演算子近似誤差, 機械精度ゲージの等値, 構造的計量摂動に対する等剛性, 制約/延長条件下での小さい可換誤差による強いクロスレゾリューション一般化, 正規化された完全/コンパクトな分解タスクにおける構造保存性能を実現することを示す。
論文 参考訳(メタデータ) (2026-03-16T02:10:06Z) - Structure-Aware Epistemic Uncertainty Quantification for Neural Operator PDE Surrogates [10.39662017167378]
不確かさの定量化(UQ)は、計算的に効率的かつ空間的に忠実でなければならない。
本稿では,現代のNOに共通するモジュラー・アナロジーを利用した構造対応UQスキームを提案する。
挑戦的なPDEベンチマークの実験では、提案された構造認識設計により、より信頼性の高いカバレッジ、よりタイトなバンド、残留不確実性アライメントの改善が示されている。
論文 参考訳(メタデータ) (2026-02-24T10:17:24Z) - Invariance on Manifolds: Understanding Robust Visual Representations for Place Recognition [19.200074425090595]
本稿では,2次幾何統計フレームワークを提案する。
提案手法では、固定されたトレーニング済みのバックボーン上に構築されたトレーニング不要のフレームワークを導入し、パラメータ更新なしで強力なゼロショット一般化を実現する。
論文 参考訳(メタデータ) (2026-01-31T18:12:29Z) - PseudoNeg-MAE: Self-Supervised Point Cloud Learning using Conditional Pseudo-Negative Embeddings [55.55445978692678]
PseudoNeg-MAEは、ポイントクラウドマスマスキングオートエンコーダのグローバルな特徴表現を強化する。
本研究では,ネットワークが識別的表現を保ちながら,よりリッチな変換キューをキャプチャできる新たな損失を提案する。
論文 参考訳(メタデータ) (2024-09-24T07:57:21Z) - Last-Iterate Convergence of Adaptive Riemannian Gradient Descent for Equilibrium Computation [52.73824786627612]
本稿では,テクスト幾何学的強単調ゲームに対する新たな収束結果を確立する。
我々のキーとなる結果は、RGDがテクスト幾何学的手法で最終定位線形収束を実現することを示しています。
全体として、ユークリッド設定を超えるゲームに対して、幾何学的に非依存な最終点収束解析を初めて提示する。
論文 参考訳(メタデータ) (2023-06-29T01:20:44Z) - Score-based Causal Representation Learning with Interventions [54.735484409244386]
本稿では,潜在因果変数を間接的に観察する際の因果表現学習問題について検討する。
目的は、 (i) 未知の線形変換(スケーリングまで)を回復し、 (ii) 潜在変数の下の有向非巡回グラフ(DAG)を決定することである。
論文 参考訳(メタデータ) (2023-01-19T18:39:48Z) - Equivariant Disentangled Transformation for Domain Generalization under
Combination Shift [91.38796390449504]
ドメインとラベルの組み合わせは、トレーニング中に観察されるのではなく、テスト環境に現れる。
我々は、同型の概念、同値性、および整合性の定義に基づく結合シフト問題の一意的な定式化を提供する。
論文 参考訳(メタデータ) (2022-08-03T12:31:31Z) - Benign Overfitting of Constant-Stepsize SGD for Linear Regression [122.70478935214128]
帰納バイアスは 経験的に過剰フィットを防げる中心的存在です
この研究は、この問題を最も基本的な設定として考慮している: 線形回帰に対する定数ステップサイズ SGD。
我々は、(正規化されていない)SGDで得られるアルゴリズム正則化と、通常の最小二乗よりも多くの顕著な違いを反映する。
論文 参考訳(メタデータ) (2021-03-23T17:15:53Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。