論文の概要: Conditionally Strongly Log-Concave Generative Models
- arxiv url: http://arxiv.org/abs/2306.00181v1
- Date: Wed, 31 May 2023 20:59:47 GMT
- ステータス: 処理完了
- システム内更新日: 2023-06-02 19:28:45.063901
- Title: Conditionally Strongly Log-Concave Generative Models
- Title(参考訳): 条件付き強log-concave生成モデル
- Authors: Florentin Guth, Etienne Lempereur, Joan Bruna, St\'ephane Mallat
- Abstract要約: 本稿では, 強い対数対数分布を持つ条件付き確率分布の積にデータ分布を分解する条件付き強対数対数モデルを提案する。
これは効率的なパラメータ推定とサンプリングアルゴリズムにつながり、理論的な保証があるが、データ分布はグローバルなログコンケーブではない。
数値的な結果は、$varphi4$モデルや弱レンズ収束写像のような物理場に対して、以前の研究よりも高分解能で示される。
- 参考スコア(独自算出の注目度): 33.79337785731899
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: There is a growing gap between the impressive results of deep image
generative models and classical algorithms that offer theoretical guarantees.
The former suffer from mode collapse or memorization issues, limiting their
application to scientific data. The latter require restrictive assumptions such
as log-concavity to escape the curse of dimensionality. We partially bridge
this gap by introducing conditionally strongly log-concave (CSLC) models, which
factorize the data distribution into a product of conditional probability
distributions that are strongly log-concave. This factorization is obtained
with orthogonal projectors adapted to the data distribution. It leads to
efficient parameter estimation and sampling algorithms, with theoretical
guarantees, although the data distribution is not globally log-concave. We show
that several challenging multiscale processes are conditionally log-concave
using wavelet packet orthogonal projectors. Numerical results are shown for
physical fields such as the $\varphi^4$ model and weak lensing convergence maps
with higher resolution than in previous works.
- Abstract(参考訳): 深い画像生成モデルの印象的な結果と、理論的保証を提供する古典的なアルゴリズムの間には、ギャップが増している。
前者はモード崩壊や記憶障害に悩まされ、科学データへの応用が制限される。
後者は次元の呪いから逃れるために対数共空のような限定的な仮定を必要とする。
条件付き強いログコンケーブ(cslc)モデルを導入することで、このギャップを部分的に橋渡しし、データ分布を強いログコンケーブである条件付き確率分布の積に分解する。
この分解は、データ分布に適応した直交プロジェクタを用いて得られる。
これは効率的なパラメータ推定とサンプリングアルゴリズムにつながり、理論的な保証があるが、データ分布はグローバルなログコンケーブではない。
本稿では,ウェーブレットパケット直交プロジェクタを用いたマルチスケールプロセスの条件付きログコンケーブについて述べる。
数値的な結果は、$\varphi^4$モデルや弱レンズ収束写像のような物理場に対して、以前の研究よりも高分解能で示される。
関連論文リスト
- Theory on Score-Mismatched Diffusion Models and Zero-Shot Conditional Samplers [49.97755400231656]
本報告では,明示的な次元の一般スコアミスマッチ拡散サンプリング器を用いた最初の性能保証について述べる。
その結果, スコアミスマッチは, 目標分布とサンプリング分布の分布バイアスとなり, 目標分布とトレーニング分布の累積ミスマッチに比例することがわかった。
この結果は、測定ノイズに関係なく、任意の条件モデルに対するゼロショット条件付きサンプリングに直接適用することができる。
論文 参考訳(メタデータ) (2024-10-17T16:42:12Z) - BGDB: Bernoulli-Gaussian Decision Block with Improved Denoising Diffusion Probabilistic Models [8.332734198630813]
生成モデルは、複雑な特徴空間を構築することによって識別的分類器を強化することができる。
本稿では,Bernolli-Gaussian Decision Block (BGDB)を提案する。
具体的には,改良拡散確率モデル(IDDPM)を用いてベルヌーイ裁判の確率をモデル化する。
論文 参考訳(メタデータ) (2024-09-19T22:52:55Z) - Unveil Conditional Diffusion Models with Classifier-free Guidance: A Sharp Statistical Theory [87.00653989457834]
条件付き拡散モデルは現代の画像合成の基礎となり、計算生物学や強化学習などの分野に広く応用されている。
経験的成功にもかかわらず、条件拡散モデルの理論はほとんど欠落している。
本稿では,条件拡散モデルを用いた分布推定の急激な統計的理論を提示することにより,ギャップを埋める。
論文 参考訳(メタデータ) (2024-03-18T17:08:24Z) - Statistically Optimal Generative Modeling with Maximum Deviation from the Empirical Distribution [2.1146241717926664]
本稿では, 左非可逆なプッシュフォワード写像に制約されたワッサーシュタインGANが, 複製を回避し, 経験的分布から著しく逸脱する分布を生成することを示す。
我々の最も重要な寄与は、生成分布と経験的分布の間のワッサーシュタイン-1距離の有限サンプル下界を与える。
また、生成分布と真のデータ生成との距離に有限サンプル上限を確立する。
論文 参考訳(メタデータ) (2023-07-31T06:11:57Z) - Score-based Diffusion Models in Function Space [140.792362459734]
拡散モデルは、最近、生成モデリングの強力なフレームワークとして登場した。
本稿では,関数空間における拡散モデルをトレーニングするためのDDO(Denoising Diffusion Operators)という,数学的に厳密なフレームワークを提案する。
データ解像度に依存しない固定コストで、対応する離散化アルゴリズムが正確なサンプルを生成することを示す。
論文 参考訳(メタデータ) (2023-02-14T23:50:53Z) - FaDIn: Fast Discretized Inference for Hawkes Processes with General
Parametric Kernels [82.53569355337586]
この研究は、有限なサポートを持つ一般パラメトリックカーネルを用いた時間点プロセス推論の効率的な解を提供する。
脳磁図(MEG)により記録された脳信号からの刺激誘発パターンの発生をモデル化し,その有効性を評価する。
その結果,提案手法により,最先端技術よりもパターン遅延の推定精度が向上することが示唆された。
論文 参考訳(メタデータ) (2022-10-10T12:35:02Z) - Convergence for score-based generative modeling with polynomial
complexity [9.953088581242845]
我々は、Scoreベースの生成モデルの背後にあるコアメカニックに対する最初の収束保証を証明した。
以前の作品と比較すると、時間的に指数関数的に増加するエラーや、次元の呪いに苦しむエラーは発生しない。
予測器・相関器はどちらの部分のみを使用するよりも収束性が高いことを示す。
論文 参考訳(メタデータ) (2022-06-13T14:57:35Z) - Universal Inference Meets Random Projections: A Scalable Test for Log-concavity [30.073886309373226]
任意の次元の有限標本で証明可能な対数凹凸の最初のテストを示す。
D次元試験問題を多くの一次元問題に変換するランダム・プロジェクション・アプローチは高出力が得られる。
論文 参考訳(メタデータ) (2021-11-17T17:34:44Z) - Partial Counterfactual Identification from Observational and
Experimental Data [83.798237968683]
観測データと実験データの任意の組み合わせから最適境界を近似する有効なモンテカルロアルゴリズムを開発した。
我々のアルゴリズムは、合成および実世界のデータセットに基づいて広範囲に検証されている。
論文 参考訳(メタデータ) (2021-10-12T02:21:30Z) - Marginalizable Density Models [14.50261153230204]
本稿では,変数の任意の部分集合の確率,限界,条件に対するクローズドフォーム表現を提供する,新しいディープネットワークアーキテクチャを提案する。
このモデルはまた、変数数に時間複雑性の対数依存しか依存しない並列サンプリングを可能にする。
論文 参考訳(メタデータ) (2021-06-08T23:54:48Z) - Autoregressive Score Matching [113.4502004812927]
自動回帰条件スコアモデル(AR-CSM)を提案する。
AR-CSMモデルでは、このデータ分布とモデル分布のばらつきを効率的に計算し、最適化することができ、高価なサンプリングや対向訓練を必要としない。
本研究では,合成データに対する密度推定,画像生成,画像復調,暗黙エンコーダを用いた潜在変数モデルの訓練に応用できることを示す。
論文 参考訳(メタデータ) (2020-10-24T07:01:24Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。