論文の概要: Sliced Wasserstein with Random-Path Projecting Directions
- arxiv url: http://arxiv.org/abs/2401.15889v1
- Date: Mon, 29 Jan 2024 04:59:30 GMT
- ステータス: 処理完了
- システム内更新日: 2024-01-30 16:06:29.419924
- Title: Sliced Wasserstein with Random-Path Projecting Directions
- Title(参考訳): ランダムパス投影方向を持つスライスワッサースタイン
- Authors: Khai Nguyen and Shujian Zhang and Tam Le and Nhat Ho
- Abstract要約: 本稿では,モンテカルロ予想推定のための高速サンプリングを行う最適化自由スライシング分布を提案する。
我々はランダムパススライシング分布(RPSD)とスライスされたワッサースタインの2つの変種、すなわちランダムパススライシングワッサースタイン(RPSW)とIWRPSW(Importance Weighted Random-Path Projection Sliced Wasserstein)を導出する。
- 参考スコア(独自算出の注目度): 54.40513432803776
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Slicing distribution selection has been used as an effective technique to
improve the performance of parameter estimators based on minimizing sliced
Wasserstein distance in applications. Previous works either utilize expensive
optimization to select the slicing distribution or use slicing distributions
that require expensive sampling methods. In this work, we propose an
optimization-free slicing distribution that provides a fast sampling for the
Monte Carlo estimation of expectation. In particular, we introduce the
random-path projecting direction (RPD) which is constructed by leveraging the
normalized difference between two random vectors following the two input
measures. From the RPD, we derive the random-path slicing distribution (RPSD)
and two variants of sliced Wasserstein, i.e., the Random-Path Projection Sliced
Wasserstein (RPSW) and the Importance Weighted Random-Path Projection Sliced
Wasserstein (IWRPSW). We then discuss the topological, statistical, and
computational properties of RPSW and IWRPSW. Finally, we showcase the favorable
performance of RPSW and IWRPSW in gradient flow and the training of denoising
diffusion generative models on images.
- Abstract(参考訳): スライシング分布選択は,スライスされたワッサーシュタイン距離を最小化するパラメータ推定器の性能向上に有効な手法として用いられている。
以前の作品は、スライシング分布を選択するために高価な最適化を使うか、高価なサンプリング方法を必要とするスライシング分布を使うかのどちらかである。
本研究では,モンテカルロの期待値推定のための高速サンプリングを提供する最適化フリースライシング分布を提案する。
特に、2つの入力測度に従う2つのランダムベクトル間の正規化差を利用して構成したランダムパス投影方向(rpd)について述べる。
RPDからランダムパススライシング分布(RPSD)と2種類のスライスされたワッサースタイン(Random-Path Projection Sliced Wasserstein)(RPSW)とIWRPSW(Importance Weighted Random-Path Projection Sliced Wasserstein)(IWRPSW)を導出する。
次に, rpsw と iwrpsw の位相的, 統計的, 計算的性質について考察する。
最後に, rpsw と iwrpsw の勾配流における良好な性能を示すとともに, 画像上での拡散生成モデルの発振訓練を行った。
関連論文リスト
- Adaptive Online Bayesian Estimation of Frequency Distributions with Local Differential Privacy [0.4604003661048266]
本稿では, 局所微分プライバシー(LDP)フレームワークを用いて, 有限個のカテゴリの周波数分布を適応的かつオンラインに推定する手法を提案する。
提案アルゴリズムは, 後方サンプリングによるベイズパラメータ推定を行い, 得られた後方サンプルに基づいて, LDPのランダム化機構を適用する。
提案手法は, (i) アルゴリズムがターゲットとする後続分布が近似した後続サンプリングであっても真のパラメータに収束し, (ii) アルゴリズムが後続サンプリングを正確に行えば高い確率で最適サブセットを選択することを示す理論解析である。
論文 参考訳(メタデータ) (2024-05-11T13:59:52Z) - Sampling for Model Predictive Trajectory Planning in Autonomous Driving using Normalizing Flows [1.2972104025246092]
本稿では,軌道生成のためのサンプリング手法について検討する。
変分推論の分野を起源とする正規化フローが検討される。
学習に基づく正規化フローモデルは、入力領域のより効率的な探索のために訓練される。
論文 参考訳(メタデータ) (2024-04-15T10:45:12Z) - Provable benefits of annealing for estimating normalizing constants:
Importance Sampling, Noise-Contrastive Estimation, and beyond [24.86929310909572]
幾何経路を用いることで、指数関数から目標と提案の間の距離の関数への推定誤差が減少することを示す。
最適経路を効率的に近似する2段階推定器を提案する。
論文 参考訳(メタデータ) (2023-10-05T21:16:55Z) - Energy-Based Sliced Wasserstein Distance [47.18652387199418]
スライスされたワッサーシュタイン(SW)距離の鍵成分はスライス分布である。
本研究では,スライシング分布をパラメータフリーなエネルギーベース分布として設計する。
次に、新しいスライスされたワッセルシュタイン計量、エネルギーベースのスライスされたワッセルシュタイン距離(EBSW)を導出する。
論文 参考訳(メタデータ) (2023-04-26T14:28:45Z) - Plug-and-Play split Gibbs sampler: embedding deep generative priors in
Bayesian inference [12.91637880428221]
本稿では, 後方分布から効率的にサンプリングするために, 可変分割を利用したプラグアンドプレイサンプリングアルゴリズムを提案する。
後方サンプリングの課題を2つの単純なサンプリング問題に分割する。
その性能は最近の最先端の最適化とサンプリング手法と比較される。
論文 参考訳(メタデータ) (2023-04-21T17:17:51Z) - Learning High Dimensional Wasserstein Geodesics [55.086626708837635]
高次元の2つの確率分布の間のワッサーシュタイン測地線を計算するための新しい定式化と学習戦略を提案する。
ラグランジュ乗算器の手法を最適輸送(OT)問題の動的定式化に適用することにより、サドル点がワッサーシュタイン測地線であるミニマックス問題を導出する。
次に、深層ニューラルネットワークによる関数のパラメータ化を行い、トレーニングのためのサンプルベースの双方向学習アルゴリズムを設計する。
論文 参考訳(メタデータ) (2021-02-05T04:25:28Z) - Pathwise Conditioning of Gaussian Processes [72.61885354624604]
ガウス過程後部をシミュレーションするための従来のアプローチでは、有限個の入力位置のプロセス値の限界分布からサンプルを抽出する。
この分布中心の特徴づけは、所望のランダムベクトルのサイズで3次スケールする生成戦略をもたらす。
条件付けのこのパスワイズ解釈が、ガウス過程の後部を効率的にサンプリングするのに役立てる近似の一般族をいかに生み出すかを示す。
論文 参考訳(メタデータ) (2020-11-08T17:09:37Z) - On Projection Robust Optimal Transport: Sample Complexity and Model
Misspecification [101.0377583883137]
射影ロバスト(PR)OTは、2つの測度の間のOTコストを最大化するために、射影可能な$k$次元部分空間を選択する。
私たちの最初の貢献は、PRワッサーシュタイン距離のいくつかの基本的な統計的性質を確立することである。
次に、部分空間を最適化するのではなく平均化することにより、PRW距離の代替として積分PRワッサーシュタイン距離(IPRW)を提案する。
論文 参考訳(メタデータ) (2020-06-22T14:35:33Z) - Distributed Averaging Methods for Randomized Second Order Optimization [54.51566432934556]
我々はヘッセン語の形成が計算的に困難であり、通信がボトルネックとなる分散最適化問題を考察する。
我々は、ヘッセンのサンプリングとスケッチを用いたランダム化二階最適化のための非バイアスパラメータ平均化手法を開発した。
また、不均一なコンピューティングシステムのための非バイアス分散最適化フレームワークを導入するために、二階平均化手法のフレームワークを拡張した。
論文 参考訳(メタデータ) (2020-02-16T09:01:18Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。