論文の概要: Generalized Sliced Distances for Probability Distributions
- arxiv url: http://arxiv.org/abs/2002.12537v1
- Date: Fri, 28 Feb 2020 04:18:00 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-28 01:28:26.507823
- Title: Generalized Sliced Distances for Probability Distributions
- Title(参考訳): 確率分布に対する一般化スライス距離
- Authors: Soheil Kolouri, Kimia Nadjahi, Umut Simsekli, Shahin Shahrampour
- Abstract要約: 我々は、一般化スライス確率測定(GSPM)と呼ばれる、幅広い確率測定値の族を紹介する。
GSPMは一般化されたラドン変換に根付いており、ユニークな幾何学的解釈を持つ。
GSPMに基づく勾配流を生成モデル応用に適用し、軽度な仮定の下では、勾配流が大域的最適に収束することを示す。
- 参考スコア(独自算出の注目度): 47.543990188697734
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Probability metrics have become an indispensable part of modern statistics
and machine learning, and they play a quintessential role in various
applications, including statistical hypothesis testing and generative modeling.
However, in a practical setting, the convergence behavior of the algorithms
built upon these distances have not been well established, except for a few
specific cases. In this paper, we introduce a broad family of probability
metrics, coined as Generalized Sliced Probability Metrics (GSPMs), that are
deeply rooted in the generalized Radon transform. We first verify that GSPMs
are metrics. Then, we identify a subset of GSPMs that are equivalent to maximum
mean discrepancy (MMD) with novel positive definite kernels, which come with a
unique geometric interpretation. Finally, by exploiting this connection, we
consider GSPM-based gradient flows for generative modeling applications and
show that under mild assumptions, the gradient flow converges to the global
optimum. We illustrate the utility of our approach on both real and synthetic
problems.
- Abstract(参考訳): 確率メトリクスは現代の統計学や機械学習において不可欠な部分となり、統計仮説テストや生成モデリングなど様々な応用において重要な役割を果たす。
しかし、現実的な環境では、いくつかの特定のケースを除いて、これらの距離上に構築されたアルゴリズムの収束挙動は十分に確立されていない。
本稿では,一般化ラドン変換に深く根ざした一般化スライス確率メトリクス(generalized sliced probability metrics,gspms)という,幅広い確率メトリクスの族を紹介する。
まずgspmがメトリクスであることを検証します。
次に,新しい正定値核を持つ最大平均偏差(mmd)と同値なgspmの部分集合を同定し,一意な幾何学的解釈を与える。
最後に,この接続を活用し,gspmに基づく勾配流を生成的モデリングアプリケーションに適用し,穏やかな仮定の下では,勾配流が大域的最適に収束することを示す。
実問題と合成問題の両方に対する我々のアプローチの有用性を説明する。
関連論文リスト
- A Likelihood Based Approach to Distribution Regression Using Conditional Deep Generative Models [6.647819824559201]
本研究では,条件付き深部生成モデルの推定のための可能性に基づくアプローチの大規模サンプル特性について検討する。
その結果,条件分布を推定するための最大極大推定器の収束率を導いた。
論文 参考訳(メタデータ) (2024-10-02T20:46:21Z) - Method-of-Moments Inference for GLMs and Doubly Robust Functionals under Proportional Asymptotics [30.324051162373973]
高次元一般化線形モデル(GLM)における回帰係数と信号対雑音比の推定について考察する。
我々は、推論対象の一貫性と漸近的正規性(CAN)推定を導出する。
理論的結果を数値実験と既存文献との比較で補完する。
論文 参考訳(メタデータ) (2024-08-12T12:43:30Z) - A Unified Theory of Stochastic Proximal Point Methods without Smoothness [52.30944052987393]
近点法はその数値的安定性と不完全なチューニングに対する頑健性からかなりの関心を集めている。
本稿では,近位点法(SPPM)の幅広いバリエーションの包括的解析について述べる。
論文 参考訳(メタデータ) (2024-05-24T21:09:19Z) - On the Consistency of Maximum Likelihood Estimation of Probabilistic
Principal Component Analysis [1.0528389538549636]
PPCAは科学や工学から定量的ファイナンスまで幅広い分野の応用がある。
様々な分野に適用可能であるにもかかわらず、このモデルに対する最大可能性(ML)解の健全性を正当化する理論的な保証はほとんど存在しない。
商位相空間を用いた新しいアプローチを提案し、特に、最大極大解が適切な商ユークリッド空間において一貫したことを示す。
論文 参考訳(メタデータ) (2023-11-08T22:40:45Z) - Conformal inference for regression on Riemannian Manifolds [49.7719149179179]
回帰シナリオの予測セットは、応答変数が$Y$で、多様体に存在し、Xで表される共変数がユークリッド空間にあるときに検討する。
我々は、多様体上のこれらの領域の経験的バージョンが、その集団に対するほぼ確実に収束していることを証明する。
論文 参考訳(メタデータ) (2023-10-12T10:56:25Z) - Posterior Contraction Rates for Mat\'ern Gaussian Processes on
Riemannian Manifolds [51.68005047958965]
我々は,本質的なガウス過程が実際により優れた性能を発揮することを示す。
我々の研究は、データ効率の異なるレベルを区別するために、よりきめ細かい分析が必要であることを示している。
論文 参考訳(メタデータ) (2023-09-19T20:30:58Z) - Simplex Random Features [53.97976744884616]
ソフトマックスおよびガウスカーネルの非バイアス近似のための新しいランダム特徴(RF)機構であるSimplex Random Features (SimRFs)を提案する。
我々は,これらのカーネルの非バイアス推定値に対して,SimRFが最小平均二乗誤差(MSE)を提供することを示す。
ポイントワイドカーネル推定,非パラメトリック分類,スケーラブルトランスフォーマーなどの設定において,SimRFによる一貫したゲインを示す。
論文 参考訳(メタデータ) (2023-01-31T18:53:39Z) - Targeted Separation and Convergence with Kernel Discrepancies [61.973643031360254]
カーネルベースの不一致測度は、(i)ターゲットPを他の確率測度から分離するか、(ii)Pへの弱収束を制御する必要がある。
本稿では, (i) と (ii) を保証するのに十分な,必要な新しい条件を導出する。
可分距離空間上のMDDに対して、ボヒナー埋め込み可測度を分離するカーネルを特徴づけ、すべての測度を非有界カーネルと分離するための単純な条件を導入する。
論文 参考訳(メタデータ) (2022-09-26T16:41:16Z) - Unified Perspective on Probability Divergence via Maximum Likelihood
Density Ratio Estimation: Bridging KL-Divergence and Integral Probability
Metrics [15.437224275494838]
KL分割とIPMはサンプリング方式によってのみ異なる最大確率で表せることを示す。
我々は、KL分割とIPMを補間する、密度比メートル法(DRM)と呼ばれる新しい確率分岐のクラスを提案する。
これらの知見に加えて、DREや生成的敵ネットワークといったDRMの応用についても紹介する。
論文 参考訳(メタデータ) (2022-01-31T11:15:04Z) - Keep it Tighter -- A Story on Analytical Mean Embeddings [0.6445605125467574]
カーネル技術は、データサイエンスにおいて最も人気があり柔軟なアプローチの一つである。
平均埋め込みは、最大平均不一致(MMD)と呼ばれる分岐測度をもたらす。
本稿では,基礎となる分布の1つの平均埋め込みが解析的に利用可能である場合のMDD推定の問題に焦点をあてる。
論文 参考訳(メタデータ) (2021-10-15T21:29:27Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。