論文の概要: Convergence of Deterministic and Stochastic Diffusion-Model Samplers: A Simple Analysis in Wasserstein Distance
- arxiv url: http://arxiv.org/abs/2508.03210v1
- Date: Tue, 05 Aug 2025 08:37:58 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-08-06 18:18:55.866174
- Title: Convergence of Deterministic and Stochastic Diffusion-Model Samplers: A Simple Analysis in Wasserstein Distance
- Title(参考訳): 決定的および確率的拡散モデルサンプリングの収束:ワッサーシュタイン距離の簡易解析
- Authors: Eliot Beyler, Francis Bach,
- Abstract要約: 本稿では,拡散型生成モデルに対するワッサーシュタイン距離の収束保証を行い,DDPMライク(英語版)法とDDIMライク(英語版)法の両方をカバーする。
特に、Hun のサンプル値に対する最初の Wasserstein 収束を導出し、確率フローODE のサンプル値に対する既存の結果を改善する。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We provide new convergence guarantees in Wasserstein distance for diffusion-based generative models, covering both stochastic (DDPM-like) and deterministic (DDIM-like) sampling methods. We introduce a simple framework to analyze discretization, initialization, and score estimation errors. Notably, we derive the first Wasserstein convergence bound for the Heun sampler and improve existing results for the Euler sampler of the probability flow ODE. Our analysis emphasizes the importance of spatial regularity of the learned score function and argues for controlling the score error with respect to the true reverse process, in line with denoising score matching. We also incorporate recent results on smoothed Wasserstein distances to sharpen initialization error bounds.
- Abstract(参考訳): 本稿では,拡散に基づく生成モデルに対するワッサーシュタイン距離の新たな収束保証を行い,確率的(DDPMライク)と決定論的(DDIMライク)の両方のサンプリング手法について述べる。
本稿では,離散化,初期化,評価誤差を簡易に解析するフレームワークを提案する。
特に、Hun のサンプル値に対する最初の Wasserstein 収束を導出し、確率フローODE の Euler サンプル値に対する既存の結果を改善する。
本分析では,学習したスコア関数の空間的正則性の重要性を強調し,真の逆過程に対するスコア誤差の制御を,聴覚的スコアマッチングに則って論じる。
また、スムーズなワッサーシュタイン距離に関する最近の結果も取り入れ、初期化誤差境界を鋭くする。
関連論文リスト
- The Effect of Stochasticity in Score-Based Diffusion Sampling: a KL Divergence Analysis [0.0]
我々はKL(Kulback-Leibler)の生成過程に及ぼすばらつきの影響について検討する。
本研究の主な成果は、加算雑音とリプシッツ連続スコア関数を持つ線形前方SDEに適用する。
論文 参考訳(メタデータ) (2025-06-13T01:01:07Z) - Unregularized limit of stochastic gradient method for Wasserstein distributionally robust optimization [8.784017987697688]
分散ロバストな最適化は、機械学習におけるモデル適合のための魅力的なフレームワークを提供する。
本研究では, エントロピーな平滑化が元の目的のサンプリングに基づく近似を導出する正規化問題について検討する。
論文 参考訳(メタデータ) (2025-06-05T12:21:44Z) - From Score Matching to Diffusion: A Fine-Grained Error Analysis in the Gaussian Setting [25.21429354164613]
We show that the Wasserstein sample error can be expressed as a kernel-type norm of the data power spectrum。
We show that the Wasserstein sample error can be expressed as a kernel-type norm of the data power spectrum。
論文 参考訳(メタデータ) (2025-03-14T17:35:00Z) - Advancing Wasserstein Convergence Analysis of Score-Based Models: Insights from Discretization and Second-Order Acceleration [5.548787731232499]
スコアベース拡散モデルのワッサーシュタイン収束解析に着目する。
我々は、オイラー離散化、指数中点法、ランダム化法など、様々な離散化スキームを比較する。
局所線形化法に基づく加速型サンプリング器を提案する。
論文 参考訳(メタデータ) (2025-02-07T11:37:51Z) - Wasserstein Bounds for generative diffusion models with Gaussian tail targets [0.0]
本稿では,データ分布とスコアベース生成モデルの生成の間のワッサースタイン距離を推定する。
次元で有界な複雑性は、対数定数を持つ$O(sqrtd)$である。
論文 参考訳(メタデータ) (2024-12-15T17:20:42Z) - On the Wasserstein Convergence and Straightness of Rectified Flow [54.580605276017096]
Rectified Flow (RF) は、ノイズからデータへの直流軌跡の学習を目的とした生成モデルである。
RFのサンプリング分布とターゲット分布とのワッサーシュタイン距離に関する理論的解析を行った。
本稿では,従来の経験的知見と一致した1-RFの特異性と直線性を保証する一般的な条件について述べる。
論文 参考訳(メタデータ) (2024-10-19T02:36:11Z) - Unified Convergence Analysis for Score-Based Diffusion Models with Deterministic Samplers [49.1574468325115]
決定論的サンプリングのための統合収束分析フレームワークを提案する。
我々のフレームワークは$tilde O(d2/epsilon)$の反復複雑性を実現する。
また,Denoising Implicit Diffusion Models (DDIM) タイプのサンプルについて詳細な分析を行った。
論文 参考訳(メタデータ) (2024-10-18T07:37:36Z) - Reflected Diffusion Models [93.26107023470979]
本稿では,データのサポートに基づいて進化する反射微分方程式を逆転する反射拡散モデルを提案する。
提案手法は,一般化されたスコアマッチング損失を用いてスコア関数を学習し,標準拡散モデルの主要成分を拡張する。
論文 参考訳(メタデータ) (2023-04-10T17:54:38Z) - Restoration-Degradation Beyond Linear Diffusions: A Non-Asymptotic
Analysis For DDIM-Type Samplers [90.45898746733397]
本研究では拡散生成モデルに用いる決定論的サンプリング器の非漸近解析のためのフレームワークを開発する。
確率フローODEに沿った1ステップは,1) 条件付き対数線上を無限に先行して上昇する回復ステップ,2) 雑音を現在の勾配に向けて前向きに進行する劣化ステップの2段階で表すことができる。
論文 参考訳(メタデータ) (2023-03-06T18:59:19Z) - Score-based Continuous-time Discrete Diffusion Models [102.65769839899315]
連続時間マルコフ連鎖を介して逆過程が認知されるマルコフジャンププロセスを導入することにより、拡散モデルを離散変数に拡張する。
条件境界分布の単純なマッチングにより、偏りのない推定器が得られることを示す。
提案手法の有効性を,合成および実世界の音楽と画像のベンチマークで示す。
論文 参考訳(メタデータ) (2022-11-30T05:33:29Z) - Nonparametric Score Estimators [49.42469547970041]
未知分布によって生成されたサンプルの集合からスコアを推定することは確率モデルの推論と学習における基本的なタスクである。
正規化非パラメトリック回帰の枠組みの下で、これらの推定器の統一的なビューを提供する。
カールフリーカーネルと高速収束による計算効果を享受する反復正規化に基づくスコア推定器を提案する。
論文 参考訳(メタデータ) (2020-05-20T15:01:03Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。