論文の概要: Large-scale optimal transport map estimation using projection pursuit
- arxiv url: http://arxiv.org/abs/2106.05838v1
- Date: Wed, 9 Jun 2021 03:53:41 GMT
- ステータス: 処理完了
- システム内更新日: 2021-06-11 14:26:54.262134
- Title: Large-scale optimal transport map estimation using projection pursuit
- Title(参考訳): 投影探索を用いた大規模最適輸送マップ推定
- Authors: Cheng Meng, Yuan Ke, Jingyi Zhang, Mengrui Zhang, Wenxuan Zhong, Ping
Ma
- Abstract要約: 本稿では,投影追従回帰の考え方と十分な次元削減を組み合わせ,大規模最適輸送マップ(OTM)の推定手法を提案する。
提案手法はPPMM (Product Tracking Monge Map) と呼ばれ,各イテレーションにおいて最も情報に富む投影方向を適応的に選択する。
- 参考スコア(独自算出の注目度): 15.90500298557047
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: This paper studies the estimation of large-scale optimal transport maps
(OTM), which is a well-known challenging problem owing to the curse of
dimensionality. Existing literature approximates the large-scale OTM by a
series of one-dimensional OTM problems through iterative random projection.
Such methods, however, suffer from slow or none convergence in practice due to
the nature of randomly selected projection directions. Instead, we propose an
estimation method of large-scale OTM by combining the idea of projection
pursuit regression and sufficient dimension reduction. The proposed method,
named projection pursuit Monge map (PPMM), adaptively selects the most
``informative'' projection direction in each iteration. We theoretically show
the proposed dimension reduction method can consistently estimate the most
``informative'' projection direction in each iteration. Furthermore, the PPMM
algorithm weakly convergences to the target large-scale OTM in a reasonable
number of steps. Empirically, PPMM is computationally easy and converges fast.
We assess its finite sample performance through the applications of Wasserstein
distance estimation and generative models.
- Abstract(参考訳): 本稿では,次元の呪いによる課題としてよく知られている,大規模最適輸送マップ(OTM)の推定について検討する。
既存の文献は、反復的ランダム・プロジェクションによる1次元のOTM問題の連続による大規模OTMを近似している。
しかし、そのような方法はランダムに選択された投影方向の性質から、実際に収束が遅いか全くない。
そこで本研究では,投影追従回帰法と十分次元縮小法を組み合わせた大規模OTM推定手法を提案する。
提案手法である射影追跡モンジマップ (ppmm) は,各イテレーションにおける最大 ‘informative''' 投影方向を適応的に選択する。
理論上,提案手法は,各イテレーションにおける最大‘インフォーマティブ’投影方向を一貫して推定できることを示す。
さらに,PPMMアルゴリズムは,目標とする大規模OTMに適度なステップで弱収束する。
PPMMは計算が容易で、高速に収束する。
本研究では,wasserstein距離推定と生成モデルの適用により,有限サンプル性能を評価する。
関連論文リスト
- Truncating Trajectories in Monte Carlo Policy Evaluation: an Adaptive Approach [51.76826149868971]
モンテカルロシミュレーションによる政策評価は多くのMC強化学習(RL)アルゴリズムの中核にある。
本研究では,異なる長さの軌跡を用いた回帰推定器の平均二乗誤差のサロゲートとして品質指標を提案する。
本稿では,Robust and Iterative Data Collection Strategy Optimization (RIDO) という適応アルゴリズムを提案する。
論文 参考訳(メタデータ) (2024-10-17T11:47:56Z) - Zeroth-Order Fine-Tuning of LLMs in Random Subspaces [66.27334633749734]
言語モデルのサイズが大きくなるにつれて、バックプロパゲーションに対するメモリ要求が増加する。
Zeroth-order (ZOZO) 最適化手法はメモリ効率の代替手段を提供する。
本稿では,SubZeroがファインチューニングを強化し,通常のZOZO手法と比較して高速な結果が得られることを示す。
論文 参考訳(メタデータ) (2024-10-11T17:01:43Z) - Faster Sampling without Isoperimetry via Diffusion-based Monte Carlo [30.4930148381328]
拡散に基づくモンテカルロ (DMC) は、等尺条件を超えた一般目標分布から試料を採取する手法である。
DMCは、高い勾配の複雑さに遭遇し、その結果、得られたサンプルのエラー耐性$epsilon$に指数関数的に依存する。
本稿では,新しい再帰に基づくスコア推定法に基づくRS-DMCを提案する。
私たちのアルゴリズムは、人気のあるLangevinベースのアルゴリズムよりもはるかに高速です。
論文 参考訳(メタデータ) (2024-01-12T02:33:57Z) - Generative modeling of time-dependent densities via optimal transport
and projection pursuit [3.069335774032178]
本稿では,時間的モデリングのための一般的なディープラーニングアルゴリズムの代替として,安価に提案する。
我々の手法は最先端の解法と比較して非常に競争力がある。
論文 参考訳(メタデータ) (2023-04-19T13:50:13Z) - Gaussian process regression and conditional Karhunen-Lo\'{e}ve models
for data assimilation in inverse problems [68.8204255655161]
偏微分方程式モデルにおけるデータ同化とパラメータ推定のためのモデル逆アルゴリズムCKLEMAPを提案する。
CKLEMAP法は標準的なMAP法に比べてスケーラビリティがよい。
論文 参考訳(メタデータ) (2023-01-26T18:14:12Z) - Near-optimal estimation of smooth transport maps with kernel
sums-of-squares [81.02564078640275]
滑らかな条件下では、2つの分布の間の正方形ワッサーシュタイン距離は、魅力的な統計的誤差上界で効率的に計算できる。
生成的モデリングのような応用への関心の対象は、基礎となる最適輸送写像である。
そこで本研究では,地図上の統計的誤差であるL2$が,既存のミニマックス下限値とほぼ一致し,スムーズな地図推定が可能となる最初のトラクタブルアルゴリズムを提案する。
論文 参考訳(メタデータ) (2021-12-03T13:45:36Z) - Entropic estimation of optimal transport maps [15.685006881635209]
厳密な有限サンプル保証付き$mathbbRd$上の2つの分布間の最適写像を推定する手法を開発する。
我々は,Sinkhornのアルゴリズムを用いて,推定器の計算が容易であることを示す。
論文 参考訳(メタデータ) (2021-09-24T14:57:26Z) - Sample and Computationally Efficient Stochastic Kriging in High
Dimensions [25.162630846306868]
我々は、次元の呪いを劇的に緩和する新しい方法論を開発する。
提案手法のサンプル複雑性は, モデルミススペクテーションの下でも, 次元においてわずかにしか増加しないことを示す。
また、近似スキームを使わずに正確な形状のクリグを計算できる高速アルゴリズムも開発している。
論文 参考訳(メタデータ) (2020-10-14T04:10:07Z) - On Projection Robust Optimal Transport: Sample Complexity and Model
Misspecification [101.0377583883137]
射影ロバスト(PR)OTは、2つの測度の間のOTコストを最大化するために、射影可能な$k$次元部分空間を選択する。
私たちの最初の貢献は、PRワッサーシュタイン距離のいくつかの基本的な統計的性質を確立することである。
次に、部分空間を最適化するのではなく平均化することにより、PRW距離の代替として積分PRワッサーシュタイン距離(IPRW)を提案する。
論文 参考訳(メタデータ) (2020-06-22T14:35:33Z) - Breaking the Sample Size Barrier in Model-Based Reinforcement Learning
with a Generative Model [50.38446482252857]
本稿では、生成モデル(シミュレータ)へのアクセスを想定して、強化学習のサンプル効率について検討する。
最初に$gamma$-discounted infinite-horizon Markov decision process (MDPs) with state space $mathcalS$ and action space $mathcalA$を考える。
対象の精度を考慮すれば,モデルに基づく計画アルゴリズムが最小限のサンプルの複雑さを実現するのに十分であることを示す。
論文 参考訳(メタデータ) (2020-05-26T17:53:18Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。