論文の概要: How Out-of-Equilibrium Phase Transitions can Seed Pattern Formation in Trained Diffusion Models
- arxiv url: http://arxiv.org/abs/2603.20092v1
- Date: Fri, 20 Mar 2026 16:19:10 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-03-23 19:48:39.227681
- Title: How Out-of-Equilibrium Phase Transitions can Seed Pattern Formation in Trained Diffusion Models
- Title(参考訳): 訓練拡散モデルにおける平衡外相転移のシードパターン形成
- Authors: Luca Ambrogioni,
- Abstract要約: 逆拡散は、小さな空間変動が増幅され、大規模構造が出現する臨界状態を通過すると論じる。
解析的に抽出可能なパッチスコアモデルを用いて、古典対称性を破る分岐が空間的に拡張された臨界現象にどのように一般化するかを示す。
- 参考スコア(独自算出の注目度): 12.52425103385255
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In this work, we propose a theoretical framework that interprets the generation process in trained diffusion models as an instance of out-of-equilibrium phase transitions. We argue that, rather than evolving smoothly from noise to data, reverse diffusion passes through a critical regime in which small spatial fluctuations are amplified and seed the emergence of large-scale structure. Our central insight is that architectural constraints, such as locality, sparsity, and translation equivariance, transform memorization-driven instabilities into collective spatial modes, enabling the formation of coherent patterns beyond the training data. Using analytically tractable patch score models, we show how classical symmetry-breaking bifurcations generalize into spatially extended critical phenomena described by softening Fourier modes and growing correlation lengths. We further connect these dynamics to effective field theories of the Ginzburg-Landau type and to mechanisms of pattern formation in non-equilibrium physics. Empirical results on trained convolutional diffusion models corroborate the theory, revealing signatures of criticality including mode softening and rapid growth of spatial correlations. Finally, we demonstrate that this critical regime has practical relevance: targeted perturbations, such as classifier-free guidance pulses applied at the estimated critical time, significantly improve generation control. Together, these findings position non-equilibrium critical phenomena as a unifying principle for understanding, and potentially improving, the behavior of modern diffusion models.
- Abstract(参考訳): 本研究では,非平衡相転移の例として,学習拡散モデルにおける生成過程を解釈する理論的枠組みを提案する。
ノイズからデータへと円滑に進化する代わりに、逆拡散は小さな空間変動が増幅され、大規模構造が出現する臨界状態を通過する。
我々の中心的な洞察は、局所性、疎性、翻訳等価性といったアーキテクチャ上の制約は、記憶による不安定性を集合的な空間的モードに変換し、トレーニングデータを超えた一貫性のあるパターンの形成を可能にすることである。
解析的に抽出可能なパッチスコアモデルを用いて、古典対称性を破る分岐が、フーリエモードの軟化と相関長の増大によって記述される空間的に拡張された臨界現象にどのように一般化されるかを示す。
さらに、これらの力学をギンズバーグ・ランダウ型の実効場理論と非平衡物理学におけるパターン形成のメカニズムに結びつける。
学習された畳み込み拡散モデルの実証的な結果は、モードの軟化や空間相関の急速な成長を含む臨界性のサインを明らかにすることによって、理論を裏付けるものである。
最後に、この臨界状態は、推定臨界時間で印加される分類器フリー誘導パルスなどの目標摂動により、生成制御が大幅に改善されることを実証する。
これらの知見は、非平衡臨界現象を現代の拡散モデルの振る舞いを理解し、潜在的に改善する統一原理として位置づけている。
関連論文リスト
- Weighted Stochastic Differential Equation to Implement Wasserstein-Fisher-Rao Gradient Flow [0.0]
有望な作業のラインは、情報幾何学から、大量再重み付け機構を備えた拡散に基づくサンプル装置の拡張まで、ツールを活用する。
本研究は,WFRに基づくサンプリング力学の予備的かつ厳密な研究であり,今後の発展の基礎となる理論構造を明らかにすることを目的としている。
論文 参考訳(メタデータ) (2025-12-19T18:31:27Z) - Unlocking hidden biomolecular conformational landscapes in diffusion models at inference time [0.828988908878327]
本稿では、コンフォメーション分布のサンプリングを強化する推論時間アルゴリズムであるConforMixを提案する。
提案手法は拡散モデルを改良し,共形変数のより効率的な発見を可能にする。
生物学的に重要なタンパク質のケーススタディは、この方法のスケーラビリティ、精度、有用性を示している。
論文 参考訳(メタデータ) (2025-12-02T23:52:05Z) - Kuramoto Orientation Diffusion Models [67.0711709825854]
指紋やテクスチャなどのオリエンテーションに富んだ画像は、しばしばコヒーレントな角模様を示す。
生体系における位相同期の役割を動機として,スコアベース生成モデルを提案する。
一般的な画像ベンチマークで競合する結果を実装し,指紋やテクスチャなどの指向性データセットの生成品質を大幅に向上する。
論文 参考訳(メタデータ) (2025-09-18T18:18:49Z) - The Information Dynamics of Generative Diffusion [12.52425103385255]
生成拡散モデルは、機械学習における強力なモデルのクラスとして登場した。
本稿では, それらの動的・情報論的・熱力学的特性を結合させることにより, 生成拡散の総合的な視点を提供する。
論文 参考訳(メタデータ) (2025-08-27T13:53:56Z) - Consistent World Models via Foresight Diffusion [56.45012929930605]
我々は、一貫した拡散に基づく世界モデルを学習する上で重要なボトルネックは、最適下予測能力にあると主張している。
本稿では,拡散に基づく世界モデリングフレームワークであるForesight Diffusion(ForeDiff)を提案する。
論文 参考訳(メタデータ) (2025-05-22T10:01:59Z) - Overcoming Dimensional Factorization Limits in Discrete Diffusion Models through Quantum Joint Distribution Learning [79.65014491424151]
量子離散化拡散確率モデル(QD3PM)を提案する。
これは、指数関数的に大きなヒルベルト空間における拡散と denoising を通じて合同確率学習を可能にする。
本稿では,共同分布学習における量子的優位性を生かして,生成モデルの新たな理論的パラダイムを確立する。
論文 参考訳(メタデータ) (2025-05-08T11:48:21Z) - Can Diffusion Models Disentangle? A Theoretical Perspective [37.21661224725838]
本稿では,拡散モデルが非交叉表現を学習する方法を理解するための新しい理論的枠組みを提案する。
我々は、一般的な非絡み付き潜在変数モデルの識別可能性条件を確立し、トレーニング力学を解析し、非絡み付き潜在部分空間モデルのサンプル複雑性境界を導出する。
論文 参考訳(メタデータ) (2025-03-31T20:46:18Z) - Predicting Cascading Failures with a Hyperparametric Diffusion Model [66.89499978864741]
拡散モデルのレンズによる電力グリッドのカスケード故障について検討する。
我々のモデルは、バイラル拡散原理と物理に基づく概念を統合する。
この拡散モデルはカスケード故障の痕跡から学習可能であることを示す。
論文 参考訳(メタデータ) (2024-06-12T02:34:24Z) - Driven-dissipative Ising Model: An exact field-theoretical analysis [0.0]
駆動散逸多体系は、非平衡力学、散逸、多体相互作用により解析的に解析することが困難である。
我々は、単純な散乱図から理解可能な、正確な場の理論解析とスピンモデルの図式表現を開発する。
論文 参考訳(メタデータ) (2021-01-13T19:00:21Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。