論文の概要: Wasserstein Gradient Flows and Forward-Only Diffusion Are Not Enough for Multimodal Sampling
- arxiv url: http://arxiv.org/abs/2610.02081v1
- Date: Thu, 01 Oct 2026 17:16:47 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-03 01:19:24.325805
- Title: Wasserstein Gradient Flows and Forward-Only Diffusion Are Not Enough for Multimodal Sampling
- Title(参考訳): ワッサーシュタイン勾配流と前方専用拡散はマルチモーダルサンプリングには不十分である
- Abstract要約: 十分に分離された多モード性は指数的に長い混合時間を誘導できることを示す。
中間分布の導入は, 総輸送時間の指数的スケーリングを排除しないことがわかった。
これは、WGFおよびFODPに基づくサンプリングの標準形式における基本的な制限である。
- 参考スコア(独自算出の注目度): 6.68214647922589
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: There has been a proliferation of sampling algorithms based on Wasserstein gradient flows (WGF) and forward-only diffusion processes (FODP), often accompanied by theoretical guarantees of exponentially fast convergence to the target distribution. These guarantees are frequently interpreted as evidence that such methods can efficiently sample complex multimodal distributions, often supported by empirical results. In this work, we argue that this interpretation is fundamentally misleading. By invoking the Jordan-Kinderlehrer-Otto (JKO) scheme and Otto calculus, we establish that the canonical WGF sampling dynamics and overdamped forward diffusion share the same density evolution and therefore inherit the same metastability and slow-mixing phenomena long understood in nonequilibrium statistical physics. We analyze this family of samplers using two complementary tools -- spectral analysis and mean first-passage time (MFPT) analysis -- and show that well-separated multimodality can induce exponentially long mixing times associated with small spectral gaps and rare inter-mode transitions. For the commonly adopted log-linear annealing schedule studied here, we find that introducing intermediate distributions does not remove the exponential scaling of the total transport time. The limitation is structural rather than implementation-specific: purely local, gradient-driven transport mechanisms can require exponentially long times to transport probability mass across well-separated modes. We argue that this represents a fundamental limitation of WGF- and FODP-based sampling in their standard forms, and motivates future development of fundamentally nonlocal mechanisms for efficient multimodal sampling.
- Abstract(参考訳): ワッサースタイン勾配流(WGF)とフォワードオンリー拡散過程(FODP)に基づくサンプリングアルゴリズムが急増しており、しばしばターゲット分布への指数的収束の理論的保証が伴っている。
これらの保証は、複雑なマルチモーダル分布を効率的にサンプリングできるという証拠としてしばしば解釈され、しばしば経験的な結果によって支持される。
本論では、この解釈は基本的に誤解を招くものであると論じる。
Jordan-Kinderlehrer-Otto(JKO)スキームとOtto calculus(Otto calculus)を誘導することにより、標準的なWGFサンプリングダイナミクスと過度に損傷された前方拡散が同じ密度の進化を共有し、したがって非平衡統計物理学において長年理解されてきた同じ転移性および遅い混合現象を継承することを確立する。
スペクトル解析と平均1次通過時間 (MFPT) 解析という2つの相補的手法を用いて, このサンプル群を解析し, スペクトルギャップと希少なモード間遷移に付随する指数的に長い混合時間を誘導できることを示す。
ここでは, 一般に採用されているログリニアアニーリングスケジュールについて, 中間分布の導入は総輸送時間の指数的スケーリングを排除しないことがわかった。
純粋に局所的な勾配駆動輸送機構は、よく分離されたモードで確率質量を輸送するために指数関数的に長い時間を必要とする。
これはWGFおよびFODPに基づくサンプリングの標準形式における基本的な制限であり、効率的なマルチモーダルサンプリングのための基本的な非局所的なメカニズムの開発を動機付けている、と我々は主張する。
関連論文リスト
- Conditional Diffusion Sampling [34.49400063747567]
Conditional Diffusion Samplingは並列テンパリングと拡散に基づくアプローチを組み合わせたフレームワークである。
本報告では, 試料品質と密度評価コストのトレードオフが, 最先端の試料装置と比較して優れていることを示す。
論文 参考訳(メタデータ) (2026-05-05T17:36:29Z) - MGD: Moment Guided Diffusion for Maximum Entropy Generation [17.895015992481806]
生成モデルの要素と古典的最大エントロピー法を組み合わせたモーメントガイド拡散(MGD)を導入する。
MGDは、有限時間でモーメントを所定の値に導く微分方程式を解くことで、最大エントロピー分布をサンプリングする。
大変動限界において,MGDの最大エントロピー分布への収束と,結果として生じるエントロピーの抽出可能な推定器の導出を正式に行う。
論文 参考訳(メタデータ) (2026-02-19T10:03:03Z) - Enhanced Diffusion Sampling: Efficient Rare Event Sampling and Free Energy Calculation with Diffusion Models [12.081055615006305]
希少領域の効率的な探索を可能にするため,拡散サンプリングの高度化を図った。
提案手法は,GPU分間からシステム毎の平衡特性の高速,高精度,スケーラブルな評価を実現する。
論文 参考訳(メタデータ) (2026-02-18T17:26:15Z) - Parallel Complex Diffusion for Scalable Time Series Generation [50.01609741902786]
PaCoDiは周波数領域における生成モデリングを分離するスペクトルネイティブアーキテクチャである。
本研究では,PaCoDiが生成品質と推論速度の両方において,既存のベースラインを上回っていることを示す。
論文 参考訳(メタデータ) (2026-02-10T14:31:53Z) - Overcoming Dimensional Factorization Limits in Discrete Diffusion Models through Quantum Joint Distribution Learning [79.65014491424151]
量子離散化拡散確率モデル(QD3PM)を提案する。
これは、指数関数的に大きなヒルベルト空間における拡散と denoising を通じて合同確率学習を可能にする。
本稿では,共同分布学習における量子的優位性を生かして,生成モデルの新たな理論的パラダイムを確立する。
論文 参考訳(メタデータ) (2025-05-08T11:48:21Z) - Solving Prior Distribution Mismatch in Diffusion Models via Optimal Transport [24.90486913773359]
近年,拡散モデル(DM)に関する知識は著しく増大しているが,いくつかの理論的なギャップが残っている。
本稿では、最適輸送(OT)理論と離散初期分布を持つDMとの深い関係について検討する。
拡散終了時間が増加するにつれて、確率フローは古典モンジュ・アンペア方程式の解の勾配に指数関数的に収束する。
論文 参考訳(メタデータ) (2024-10-17T10:54:55Z) - Convergence of Score-Based Discrete Diffusion Models: A Discrete-Time Analysis [56.442307356162864]
連続時間マルコフ連鎖(CTMC)に基づくスコアベース離散拡散モデルの理論的側面について検討する。
本稿では,事前定義された時間点におけるスコア推定値を利用する離散時間サンプリングアルゴリズムを一般状態空間$[S]d$に導入する。
我々の収束解析はジルサノフ法を用いて離散スコア関数の重要な性質を確立する。
論文 参考訳(メタデータ) (2024-10-03T09:07:13Z) - Flow matching achieves almost minimax optimal convergence [50.38891696297888]
フローマッチング (FM) は, シミュレーションのない生成モデルとして注目されている。
本稿では,大試料径のFMの収束特性を$p$-Wasserstein 距離で論じる。
我々は、FMが1leq p leq 2$でほぼ最小の収束率を達成できることを確立し、FMが拡散モデルに匹敵する収束率に達するという最初の理論的証拠を示す。
論文 参考訳(メタデータ) (2024-05-31T14:54:51Z) - Broadening Target Distributions for Accelerated Diffusion Models via a Novel Analysis Approach [49.97755400231656]
本研究では,新しいDDPMサンプリング器が,これまで考慮されていなかった3種類の分散クラスに対して高速化性能を実現することを示す。
この結果から, DDPM型加速サンプリング器におけるデータ次元$d$への依存性が改善された。
論文 参考訳(メタデータ) (2024-02-21T16:11:47Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。