論文の概要: Linearized Wasserstein dimensionality reduction with approximation
guarantees
- arxiv url: http://arxiv.org/abs/2302.07373v1
- Date: Tue, 14 Feb 2023 22:12:16 GMT
- ステータス: 処理完了
- システム内更新日: 2023-02-16 16:19:09.452885
- Title: Linearized Wasserstein dimensionality reduction with approximation
guarantees
- Title(参考訳): 近似保証付き線形化ワッサーシュタイン次元減少
- Authors: Alexander Cloninger, Keaton Hamm, Varun Khurana, Caroline Moosm\"uller
- Abstract要約: LOT Wassmap は、ワーッサーシュタイン空間の低次元構造を明らかにするための計算可能なアルゴリズムである。
我々は,LOT Wassmapが正しい埋め込みを実現し,サンプルサイズの増加とともに品質が向上することを示す。
また、LOT Wassmapがペア距離計算に依存するアルゴリズムと比較して計算コストを大幅に削減することを示す。
- 参考スコア(独自算出の注目度): 65.16758672591365
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We introduce LOT Wassmap, a computationally feasible algorithm to uncover
low-dimensional structures in the Wasserstein space. The algorithm is motivated
by the observation that many datasets are naturally interpreted as probability
measures rather than points in $\mathbb{R}^n$, and that finding low-dimensional
descriptions of such datasets requires manifold learning algorithms in the
Wasserstein space. Most available algorithms are based on computing the
pairwise Wasserstein distance matrix, which can be computationally challenging
for large datasets in high dimensions. Our algorithm leverages approximation
schemes such as Sinkhorn distances and linearized optimal transport to speed-up
computations, and in particular, avoids computing a pairwise distance matrix.
We provide guarantees on the embedding quality under such approximations,
including when explicit descriptions of the probability measures are not
available and one must deal with finite samples instead. Experiments
demonstrate that LOT Wassmap attains correct embeddings and that the quality
improves with increased sample size. We also show how LOT Wassmap significantly
reduces the computational cost when compared to algorithms that depend on
pairwise distance computations.
- Abstract(参考訳): ワッサースタイン空間の低次元構造を明らかにする計算可能なアルゴリズムである lot wassmap を導入する。
このアルゴリズムは、多くのデータセットが$\mathbb{r}^n$の点よりも自然に確率測度として解釈され、そのようなデータセットの低次元記述を見つけるには、ワッサースタイン空間における多様体学習アルゴリズムが必要であるという観察によって動機付けられたものである。
ほとんどのアルゴリズムはペアワイズ・ワッサースタイン距離行列の計算に基づいており、これは高次元の大規模データセットに対して計算的に困難である。
我々のアルゴリズムはシンクホーン距離や線形化された最適輸送といった近似スキームを利用して高速化計算を行い、特にペア距離行列の計算を避ける。
このような近似の下では、確率測度の明示的な記述が得られず、代わりに有限なサンプルを扱う必要がある場合など、埋め込み品質の保証を提供する。
実験では、LOT Wassmapが正しい埋め込みを実現し、サンプルサイズの増加とともに品質が向上することを示した。
また,対数距離計算に依存するアルゴリズムと比較して,wassmapが計算コストを大幅に削減することを示す。
関連論文リスト
- A Sample Efficient Alternating Minimization-based Algorithm For Robust Phase Retrieval [56.67706781191521]
そこで本研究では,未知の信号の復元を課題とする,ロバストな位相探索問題を提案する。
提案するオラクルは、単純な勾配ステップと外れ値を用いて、計算学的スペクトル降下を回避している。
論文 参考訳(メタデータ) (2024-09-07T06:37:23Z) - Stochastic Optimization for Non-convex Problem with Inexact Hessian
Matrix, Gradient, and Function [99.31457740916815]
信頼領域(TR)と立方体を用いた適応正則化は、非常に魅力的な理論的性質を持つことが証明されている。
TR法とARC法はヘッセン関数,勾配関数,関数値の非コンパクトな計算を同時に行うことができることを示す。
論文 参考訳(メタデータ) (2023-10-18T10:29:58Z) - Efficient and Accurate Optimal Transport with Mirror Descent and
Conjugate Gradients [15.128885770407132]
本研究では, エントロピー的最適輸送, ミラー降下, 共役勾配の文献から, 最適輸送のための新しいアルゴリズムを設計する。
我々のスケーラブルでGPU並列化可能なアルゴリズムは、ワッサースタイン距離を極端精度で計算することができ、数値安定性の問題なく相対誤差レート10~8ドルに達することができる。
論文 参考訳(メタデータ) (2023-07-17T14:09:43Z) - Near-optimal estimation of smooth transport maps with kernel
sums-of-squares [81.02564078640275]
滑らかな条件下では、2つの分布の間の正方形ワッサーシュタイン距離は、魅力的な統計的誤差上界で効率的に計算できる。
生成的モデリングのような応用への関心の対象は、基礎となる最適輸送写像である。
そこで本研究では,地図上の統計的誤差であるL2$が,既存のミニマックス下限値とほぼ一致し,スムーズな地図推定が可能となる最初のトラクタブルアルゴリズムを提案する。
論文 参考訳(メタデータ) (2021-12-03T13:45:36Z) - Unfolding Projection-free SDP Relaxation of Binary Graph Classifier via
GDPA Linearization [59.87663954467815]
アルゴリズムの展開は、モデルベースのアルゴリズムの各イテレーションをニューラルネットワーク層として実装することにより、解釈可能で類似のニューラルネットワークアーキテクチャを生成する。
本稿では、Gershgorin disc perfect alignment (GDPA)と呼ばれる最近の線形代数定理を利用して、二進グラフの半定値プログラミング緩和(SDR)のためのプロジェクションフリーアルゴリズムをアンロールする。
実験結果から,我々の未学習ネットワークは純粋モデルベースグラフ分類器よりも優れ,純粋データ駆動ネットワークに匹敵する性能を示したが,パラメータははるかに少なかった。
論文 参考訳(メタデータ) (2021-09-10T07:01:15Z) - Projection Robust Wasserstein Barycenter [36.97843660480747]
ワッサースタイン・バリセンターの 近似は 次元の呪いのため 数値的に困難です
本稿では,次元の呪いを緩和するプロジェクションロバストなワッサーシュタインバリセンタ(PRWB)を提案する。
論文 参考訳(メタデータ) (2021-02-05T19:23:35Z) - Learning High Dimensional Wasserstein Geodesics [55.086626708837635]
高次元の2つの確率分布の間のワッサーシュタイン測地線を計算するための新しい定式化と学習戦略を提案する。
ラグランジュ乗算器の手法を最適輸送(OT)問題の動的定式化に適用することにより、サドル点がワッサーシュタイン測地線であるミニマックス問題を導出する。
次に、深層ニューラルネットワークによる関数のパラメータ化を行い、トレーニングのためのサンプルベースの双方向学習アルゴリズムを設計する。
論文 参考訳(メタデータ) (2021-02-05T04:25:28Z) - A Study of Performance of Optimal Transport [16.847501106437534]
本稿では,ネットワークの単純化と拡張パスに基づくアルゴリズムが,数値行列スケーリング法より一貫して優れていることを示す。
古典的なKuhn-Munkresアルゴリズムを改良した新しいアルゴリズムを提案する。
論文 参考訳(メタデータ) (2020-05-03T20:37:05Z) - Scalable Distributed Approximation of Internal Measures for Clustering
Evaluation [5.144809478361603]
クラスタリング評価のための内部測度はシルエット係数であり、計算には2つの距離計算が必要である。
本稿では,任意の距離に基づいてクラスタリングの評価を行うための厳密な近似を計算した最初のスケーラブルアルゴリズムを提案する。
また,このアルゴリズムは凝集や分離などのクラスタリング品質の他の内部指標の厳密な近似に適応可能であることも証明した。
論文 参考訳(メタデータ) (2020-03-03T10:28:14Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。