論文の概要: Discovering and decoding latent mean-field structure with variational autoencoders
- arxiv url: http://arxiv.org/abs/2606.08694v1
- Date: Sun, 07 Jun 2026 15:48:50 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-06-09 14:42:06.394717
- Title: Discovering and decoding latent mean-field structure with variational autoencoders
- Title(参考訳): 変分オートエンコーダを用いた潜在平均場構造の検出と復号
- Authors: Marco Biroli, Max Welling, Vincenzo Vitelli,
- Abstract要約: 可変オートエンコーダ(VAE)の容量を定量化する直感的な基準を確立し、多数のボディシステムの結合確率分布を忠実に再構築する。
任意の成功したVAEの条件独立デコーダは、有限サイズ平均場分解と構造的に同一であることを示す。
これらの結論はスカラー(Curie-Weiss)、ベクトル(Hopfield)、テンソル(Maier-Saupe)の順序パラメータを持つ可解モデルの階層上で検証する。
- 参考スコア(独自算出の注目度): 25.443969857579074
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Generative models are increasingly used to capture correlations in many-body systems, but the representations they learn remain largely opaque to physical interpretation. Here, we establish an intuitive criterion that quantifies the capacity of a variational autoencoder (VAE) to faithfully reconstruct the joint probability distribution of a many body system. In a nutshell, a bound on the VAE capacity is obtained by comparing the rate of the latent channel to the bipartite mutual information of the data. Using this bound, we show that the conditionally independent decoder of any successful VAE is structurally identical to a finite-size mean-field factorization. Hence, a successful reconstruction is direct evidence for a latent mean-field theory and the microscopic parameters of that theory can be read off the trained decoder. We validate these conclusions on a hierarchy of solvable models with scalar (Curie-Weiss), vector (Hopfield) and tensor (Maier-Saupe) order parameters, recovering the full Hopfield pattern matrix from equilibrium samples alone. We find that, when applied to Salamander retinal recordings, a two-latent VAE reproduces the population statistics with only two effective collective variables allowing us to recover the `stored patterns' of the neural population and write a generalized Hopfield model which correctly models the experimental data.
- Abstract(参考訳): 生成モデルは多体系の相関を捉えるためにますます使われるが、それらが学習する表現は、物理的解釈にはほとんど不透明である。
そこで我々は,多数のボディシステムの結合確率分布を忠実に再構成するために,変分オートエンコーダ(VAE)の容量を定量化する直感的な基準を確立する。
ヌットシェルにおいて、潜伏チャネルのレートとデータの二部間相互情報とを比較することにより、VAE容量のバウンダリを得る。
この境界を用いて、任意の成功したVAEの条件独立デコーダは、有限サイズ平均場分解と構造的に同一であることを示す。
したがって、再建に成功したことは潜伏平均場理論の直接的な証拠であり、その理論の顕微鏡的パラメータは訓練された復号器から読み取ることができる。
これらの結論をスカラー(Curie-Weiss)、ベクトル(Hopfield)、テンソル(Maier-Saupe)の順序パラメータを持つ可解モデルの階層上で検証し、平衡サンプルのみからホップフィールドパターン行列全体を復元する。
サラマンダーの網膜記録に適用すると、2遅延のVAEは2つの有効な集団変数で人口統計を再現し、神経集団の「保存パターン」を復元し、実験データを正しくモデル化する一般化されたホプフィールドモデルを記述する。
関連論文リスト
- Disentangled representations via score-based variational autoencoders [21.955536401578616]
マルチスケール推論のためのスコアベースオートエンコーダ(SAMI)を提案する。
SAMIは、基礎となる拡散過程のスコアベースのガイダンスを通じて表現を学ぶ、原則化された目的を定式化する。
最小限の追加訓練で事前学習した拡散モデルから有用な表現を抽出することができる。
論文 参考訳(メタデータ) (2025-12-18T23:42:10Z) - Multi-modal Gaussian Process Variational Autoencoders for Neural and
Behavioral Data [0.9622208190558754]
そこで本研究では,時間的に進化する共振子と独立潜光子を個別に同時記録した実験モードのために抽出する非教師付き潜光子変数モデルを提案する。
我々は,ポアソンスパイク数と時間とともにスムーズかつスムーズに回転するMNIST画像からなるシミュレーションマルチモーダルデータに対して,本モデルの有効性を検証した。
マルチモーダルGP-VAEは、モダリティ間の共有および独立の潜伏構造を正確に識別できるだけでなく、保留試験において画像とニューラルレートの両方を適切に再構成できることを示す。
論文 参考訳(メタデータ) (2023-10-04T19:04:55Z) - Disentanglement via Latent Quantization [60.37109712033694]
本研究では,組織化された潜在空間からの符号化と復号化に向けた帰納的バイアスを構築する。
本稿では,基本データレコーダ (vanilla autoencoder) と潜時再構成 (InfoGAN) 生成モデルの両方に追加することで,このアプローチの広範な適用性を実証する。
論文 参考訳(メタデータ) (2023-05-28T06:30:29Z) - Language as a Latent Sequence: deep latent variable models for
semi-supervised paraphrase generation [47.33223015862104]
本稿では,観測されたテキストから遅延シーケンス推論を行うVSARという新しい教師なしモデルを提案する。
また、テキストペアからの情報を活用するために、提案したVSARモデルと統合するために設計されたDDLと呼ばれる新しい教師付きモデルを導入する。
実験により, このモデルを組み合わせることで, 完全データに基づく最先端の教師付きベースラインに対して, 競争性能が向上することが示唆された。
論文 参考訳(メタデータ) (2023-01-05T19:35:30Z) - Attribute Graphs Underlying Molecular Generative Models: Path to Learning with Limited Data [42.517927809224275]
本研究では,事前学習された生成オートエンコーダの潜伏符号の摂動実験を頼りに属性グラフを探索するアルゴリズムを提案する。
潜在符号間の構造方程式モデルをモデル化する有効なグラフィカルモデルに適合することを示す。
小分子の大きなデータセットで訓練された事前学習された生成オートエンコーダを用いて、グラフィカルモデルを用いて特定の特性を予測できることを実証する。
論文 参考訳(メタデータ) (2022-07-14T19:20:30Z) - Autoencoding Variational Autoencoder [56.05008520271406]
我々は,この行動が学習表現に与える影響と,自己整合性の概念を導入することでそれを修正する結果について検討する。
自己整合性アプローチで訓練されたエンコーダは、敵攻撃による入力の摂動に対して頑健な(無神経な)表現につながることを示す。
論文 参考訳(メタデータ) (2020-12-07T14:16:14Z) - Learning Disentangled Latent Factors from Paired Data in Cross-Modal
Retrieval: An Implicit Identifiable VAE Approach [33.61751393224223]
両モーダルデータ間で相互に共有される不整合潜在因子を相互に検索する際の問題に対処する。
本稿では,潜在変数モデルから周辺データデコードモジュールを完全に除去する暗黙デコーダの新たなアイデアを提案する。
本モデルでは,従来のエンコーダ・デコーダの潜在変数モデルよりも精度が高く,精度も優れていた。
論文 参考訳(メタデータ) (2020-12-01T17:47:50Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。