論文の概要: Piecewise Normalizing Flows
- arxiv url: http://arxiv.org/abs/2305.02930v2
- Date: Thu, 1 Feb 2024 12:06:30 GMT
- ステータス: 処理完了
- システム内更新日: 2024-02-02 19:49:08.981725
- Title: Piecewise Normalizing Flows
- Title(参考訳): ピースワイド正規化フロー
- Authors: Harry Bevins, Will Handley, Thomas Gessey-Jones
- Abstract要約: ターゲットのトポロジとベースとのミスマッチは、粗悪なパフォーマンスをもたらす。
多くの異なる研究が、目標に合うように、ベース分布のトポロジーを変更しようと試みている。
対象の分布をクラスタに分割する分別正規化フローを導入し,標準正規化ベース分布によく適合するトポロジを提案する。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Normalizing flows are an established approach for modelling complex
probability densities through invertible transformations from a base
distribution. However, the accuracy with which the target distribution can be
captured by the normalizing flow is strongly influenced by the topology of the
base distribution. A mismatch between the topology of the target and the base
can result in a poor performance, as is typically the case for multi-modal
problems. A number of different works have attempted to modify the topology of
the base distribution to better match the target, either through the use of
Gaussian Mixture Models (Izmailov et al., 2020; Ardizzone et al., 2020;
Hagemann & Neumayer, 2021) or learned accept/reject sampling (Stimper et al.,
2022). We introduce piecewise normalizing flows which divide the target
distribution into clusters, with topologies that better match the standard
normal base distribution, and train a series of flows to model complex
multi-modal targets. We demonstrate the performance of the piecewise flows
using some standard benchmarks and compare the accuracy of the flows to the
approach taken in Stimper et al. (2022) for modelling multi-modal
distributions. We find that our approach consistently outperforms the approach
in Stimper et al. (2022) with a higher emulation accuracy on the standard
benchmarks.
- Abstract(参考訳): 正規化フローは、基底分布からの可逆変換を通じて複素確率密度をモデル化するための確立されたアプローチである。
しかし, 正規化流によってターゲット分布を捕捉できる精度は, ベース分布のトポロジーの影響を強く受けている。
ターゲットのトポロジーとベースとのミスマッチは、通常マルチモーダル問題の場合と同様に、パフォーマンスが低下する可能性がある。
いくつかの異なる研究が、ガウス混合モデル(Izmailov et al., 2020; Ardizzone et al., 2020; Hagemann & Neumayer, 2021)や学習されたアセプション/リジェクションサンプリング(Stimper et al., 2022)を用いて、目標に合うようにベース分布のトポロジを変更しようと試みている。
対象の分布をクラスタに分割する分節正規化フローを導入し、標準の正規分布によく適合するトポロジーを導入し、複雑なマルチモーダルターゲットをモデル化するために一連のフローを訓練する。
Stimper et al. (2022) で行ったマルチモーダル分布のモデル化手法と比較し,いくつかの標準ベンチマークを用いて断片フローの性能を実証する。
我々は,Stimper et al. (2022) のアプローチを標準ベンチマークよりも高いエミュレーション精度で一貫して上回っていることを発見した。
関連論文リスト
- 2-Rectifications are Enough for Straight Flows: A Theoretical Insight into Wasserstein Convergence [54.580605276017096]
本稿では, 凝固流のサンプリング分布とターゲット分布とのワッサーシュタイン距離に関する最初の理論的解析を行った。
ガウス流から有限の第一モーメントを持つ任意の一般目標分布への整流の場合、直流を達成するのに2つの整流が十分であることを示す。
論文 参考訳(メタデータ) (2024-10-19T02:36:11Z) - Theory on Score-Mismatched Diffusion Models and Zero-Shot Conditional Samplers [49.97755400231656]
本報告では,明示的な次元の一般スコアミスマッチ拡散サンプリング器を用いた最初の性能保証について述べる。
その結果, スコアミスマッチは, 目標分布とサンプリング分布の分布バイアスとなり, 目標分布とトレーニング分布の累積ミスマッチに比例することがわかった。
この結果は、測定ノイズに関係なく、任意の条件モデルに対するゼロショット条件付きサンプリングに直接適用することができる。
論文 参考訳(メタデータ) (2024-10-17T16:42:12Z) - Marginalization Consistent Mixture of Separable Flows for Probabilistic Irregular Time Series Forecasting [4.714246221974192]
我々は,新しい確率的不規則時系列予測モデル,Marginalization Consistent Mixtures of Separable Flows (moses)を開発した。
mosesは、他の最先端のマーカライゼーション一貫性モデルより優れ、ProFITiと同等だが、ProFITiと異なり、マーカライゼーション一貫性を保証する。
論文 参考訳(メタデータ) (2024-06-11T13:28:43Z) - MGF: Mixed Gaussian Flow for Diverse Trajectory Prediction [72.70572835589158]
本稿では,軌道予測のための正規化フローモデルに対して,混合ガウス前駆体を構築することを提案する。
提案手法は,一般的な UCY/ETH および SDD データセットにおける軌道アライメントと多様性の評価において,最先端の性能を実現する。
論文 参考訳(メタデータ) (2024-02-19T15:48:55Z) - Normalizing flow sampling with Langevin dynamics in the latent space [12.91637880428221]
正規化フロー(NF)は、連続生成器を使用して、単純な潜伏分布(例えばガウス分布)をトレーニングデータセットに関連する経験的対象分布にマッピングする。
標準NFは可微分写像を実装しているため、複雑な分布を対象とする場合、病理学的挙動に悩まされることがある。
本稿では,マルコフ連鎖モンテカルロアルゴリズムを提案する。
論文 参考訳(メタデータ) (2023-05-20T09:31:35Z) - Building Normalizing Flows with Stochastic Interpolants [11.22149158986164]
一対の基底分布と対象分布の間の連続時間正規化フローに基づく単純な2次モデルを提案する。
この流れの速度場は、基地と目標の間を有限時間で補間する時間依存分布の確率電流から推定される。
論文 参考訳(メタデータ) (2022-09-30T16:30:31Z) - Efficient CDF Approximations for Normalizing Flows [64.60846767084877]
正規化フローの微分同相性に基づいて、閉領域上の累積分布関数(CDF)を推定する。
一般的なフローアーキテクチャとUCIデータセットに関する実験は,従来の推定器と比較して,サンプル効率が著しく向上したことを示している。
論文 参考訳(メタデータ) (2022-02-23T06:11:49Z) - Resampling Base Distributions of Normalizing Flows [0.0]
学習された拒絶サンプリングに基づいて,フローを正規化するためのベース分布を導入する。
ログライクリフの最大化と逆Kulback-Leibler分散の最適化の両方を用いて、適切な学習アルゴリズムを開発する。
論文 参考訳(メタデータ) (2021-10-29T14:44:44Z) - KL Guided Domain Adaptation [88.19298405363452]
ドメイン適応は重要な問題であり、現実世界のアプリケーションにしばしば必要である。
ドメイン適応文学における一般的なアプローチは、ソースとターゲットドメインに同じ分布を持つ入力の表現を学ぶことである。
確率的表現ネットワークにより、KL項はミニバッチサンプルにより効率的に推定できることを示す。
論文 参考訳(メタデータ) (2021-06-14T22:24:23Z) - Gaussianization Flows [113.79542218282282]
そこで本研究では,サンプル生成における効率のよい繰り返しと効率のよい逆変換を両立できる新しい型正規化フローモデルを提案する。
この保証された表現性のため、サンプル生成の効率を損なうことなく、マルチモーダルなターゲット分布をキャプチャできる。
論文 参考訳(メタデータ) (2020-03-04T08:15:06Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。