論文の概要: Emergence of Nonequilibrium Latent Cycles in Unsupervised Generative Modeling
- arxiv url: http://arxiv.org/abs/2512.11415v1
- Date: Fri, 12 Dec 2025 09:48:08 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-12-15 15:48:11.719923
- Title: Emergence of Nonequilibrium Latent Cycles in Unsupervised Generative Modeling
- Title(参考訳): 非教師なし生成モデルにおける非平衡潜在サイクルの創出
- Authors: Marco Baiesi, Alberto Rosso,
- Abstract要約: 非平衡力学は、潜在状態サイクルの自然発生を誘導することにより、教師なし機械学習において構築的な役割を果たすことを示す。
可視変数と隠れ変数が独立にパラメータ化された遷移行列を介して相互作用するモデルを導入する。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We show that nonequilibrium dynamics can play a constructive role in unsupervised machine learning by inducing the spontaneous emergence of latent-state cycles. We introduce a model in which visible and hidden variables interact through two independently parametrized transition matrices, defining a Markov chain whose steady state is intrinsically out of equilibrium. Likelihood maximization drives this system toward nonequilibrium steady states with finite entropy production, reduced self-transition probabilities, and persistent probability currents in the latent space. These cycles are not imposed by the architecture but arise from training, and models that develop them avoid the low-log-likelihood regime associated with nearly reversible dynamics while more faithfully reproducing the empirical distribution of data classes. Compared with equilibrium approaches such as restricted Boltzmann machines, our model breaks the detailed balance between the forward and backward conditional transitions and relies on a log-likelihood gradient that depends explicitly on the last two steps of the Markov chain. Hence, this exploration of the interface between nonequilibrium statistical physics and modern machine learning suggests that introducing irreversibility into latent-variable models can enhance generative performance.
- Abstract(参考訳): 非平衡力学は、潜在状態サイクルの自然発生を誘導することにより、教師なし機械学習において構築的な役割を果たすことを示す。
可視変数と隠れ変数が2つの独立にパラメトリゼーションされた遷移行列を介して相互作用し、定常状態が本質的に平衡から外れたマルコフ連鎖を定義するモデルを導入する。
等分極大化はこの系を、有限エントロピー生成、自己遷移確率の減少、潜在空間における持続的な確率電流を含む非平衡定常状態へと誘導する。
これらのサイクルはアーキテクチャによって課されるものではなく、トレーニングから生じ、それらを開発するモデルは、データクラスの経験的分布をより忠実に再現しながら、ほとんど可逆的なダイナミクスに関連する低ログ的な状態を避ける。
制限ボルツマンマシンのような平衡アプローチと比較して、我々のモデルは前方と後方の条件遷移の詳細なバランスを破り、マルコフ連鎖の最後の2ステップに明示的に依存する対数的勾配に依存する。
したがって、非平衡統計物理学と現代の機械学習の界面の探索は、潜在変数モデルに不可逆性を導入することによって生成性能が向上することを示している。
関連論文リスト
- Identifiable learning of dissipative dynamics [25.409059056398124]
I-OnsagerNetは、散逸ダイナミクスを直接トラジェクトリから学習するニューラルネットワークフレームワークである。
I-OnsagerNetはOnsagerの原理を拡張して、学習されたポテンシャルが定常密度から得られることを保証している。
このアプローチはエントロピーの生成を計算し、不可逆性を定量化し、平衡から逸脱を検出し定量化する原則的な方法を提供する。
論文 参考訳(メタデータ) (2025-10-28T07:57:14Z) - Drift No More? Context Equilibria in Multi-Turn LLM Interactions [58.69551510148673]
コンテキストドリフト(Contexts drift)とは、ターン間のゴール一貫性のある振る舞いからモデルが出力する出力の段階的なばらつきである。
シングルターンエラーとは異なり、ドリフトは時間的に展開し、静的な評価指標では捉えにくい。
マルチターンドリフトは、避けられない崩壊というよりも、制御可能な平衡現象として理解できることを示す。
論文 参考訳(メタデータ) (2025-10-09T04:48:49Z) - Critical dynamics and superconducting state preparation in the quenched Kitaev chain with pairing imbalance [0.0]
ペアリング項のバランスは、p波スピンレスキタエフ鎖におけるトポロジカル超伝導の出現に重要な役割を果たしている。
北エフ鎖の平衡現象と非平衡現象に対する非エルミートペアリング項の影響について検討する。
論文 参考訳(メタデータ) (2025-09-25T20:28:58Z) - Generative System Dynamics in Recurrent Neural Networks [56.958984970518564]
リカレントニューラルネットワーク(RNN)の連続時間ダイナミクスについて検討する。
線形および非線形構成の両方において安定な極限サイクルを実現するためには,スキュー対称性の重み行列が基本であることを示す。
数値シミュレーションは、非線形活性化関数が極限周期を維持するだけでなく、システム統合プロセスの数値安定性を高めることを示す。
論文 参考訳(メタデータ) (2025-04-16T10:39:43Z) - The statistical thermodynamics of generative diffusion models: Phase transitions, symmetry breaking and critical instability [6.4322891559626125]
生成拡散モデルが普遍性破壊現象に対応する2次相転移を行うことを示す。
相転移から生じる臨界不安定性は、その生成能力の中心にあると我々は主張する。
論文 参考訳(メタデータ) (2023-10-26T15:15:01Z) - Sufficient condition for gapless spin-boson Lindbladians, and its
connection to dissipative time-crystals [64.76138964691705]
我々は、集合スピンボソン系に対するリンドブレディアン・マスター方程式におけるギャップレス励起の十分条件について議論する。
ギャップレスモードは、散逸時間結晶の形成を可能とし、スピンオブザーバブルの持続的なダイナミクスをもたらす可能性があると我々は主張する。
論文 参考訳(メタデータ) (2022-09-26T18:34:59Z) - Non-equilibrium non-Markovian steady-states in open quantum many-body
systems: Persistent oscillations in Heisenberg quantum spin chains [68.8204255655161]
オープンなハイゼンベルクスピン鎖に対する非マルコフ型構造貯水池の効果について検討した。
我々は、貯水池がスピン鎖に周波数依存するので、コヒーレントな自己フィードバック機構を確立する。
論文 参考訳(メタデータ) (2020-06-05T09:16:28Z) - Deep Variational Luenberger-type Observer for Stochastic Video
Prediction [46.82873654555665]
本研究では,状態空間モデルの解釈可能性とディープニューラルネットワークの表現を組み合わせ,映像予測の課題について検討する。
我々のモデルは,入力映像を潜時特徴空間に変換する変分エンコーダと,潜時特徴の動的進化を捉えたルエンベルガー型オブザーバの上に構築されている。
論文 参考訳(メタデータ) (2020-02-12T06:59:04Z) - Distributing entanglement with separable states: assessment of encoding
and decoding imperfections [55.41644538483948]
絡み合いは、常に関連する他のシステムと分離可能なキャリアを使って分散することができる。
不完全なユニタリ相互作用と協調して作用する不整合力学の影響を考察する。
絡み合いの利得は、相当な単元誤差があっても可能であることを示す。
論文 参考訳(メタデータ) (2020-02-11T15:25:19Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。