論文の概要: Constrained Sliced Wasserstein Embedding
- arxiv url: http://arxiv.org/abs/2506.02203v1
- Date: Mon, 02 Jun 2025 19:43:40 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-06-04 21:47:34.99439
- Title: Constrained Sliced Wasserstein Embedding
- Title(参考訳): 拘束スライスワッサースタインインベディング
- Authors: Navid NaderiAlizadeh, Darian Salehi, Xinran Liu, Soheil Kolouri,
- Abstract要約: SW距離のスライシング方向を最適化するための制約付き学習手法を提案する。
固定長の置換不変表現に高次元埋め込みをプールするために、この制約付きスライシングアプローチをどのように適用できるかを実証する。
- 参考スコア(独自算出の注目度): 15.569545184712942
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Sliced Wasserstein (SW) distances offer an efficient method for comparing high-dimensional probability measures by projecting them onto multiple 1-dimensional probability distributions. However, identifying informative slicing directions has proven challenging, often necessitating a large number of slices to achieve desirable performance and thereby increasing computational complexity. We introduce a constrained learning approach to optimize the slicing directions for SW distances. Specifically, we constrain the 1D transport plans to approximate the optimal plan in the original space, ensuring meaningful slicing directions. By leveraging continuous relaxations of these transport plans, we enable a gradient-based primal-dual approach to train the slicer parameters, alongside the remaining model parameters. We demonstrate how this constrained slicing approach can be applied to pool high-dimensional embeddings into fixed-length permutation-invariant representations. Numerical results on foundation models trained on images, point clouds, and protein sequences showcase the efficacy of the proposed constrained learning approach in learning more informative slicing directions. Our implementation code can be found at https://github.com/Stranja572/constrainedswe.
- Abstract(参考訳): スライスされたワッサーシュタイン距離(SW)は、複数の1次元確率分布に投影することで高次元確率測度を比較する効率的な方法を提供する。
しかし、情報スライシングの方向を特定することは困難であり、多くの場合、望ましい性能を達成するために大量のスライスを必要とし、計算の複雑さを増大させる。
SW距離のスライシング方向を最適化するための制約付き学習手法を提案する。
具体的には、1次元輸送計画の制約により、元の空間における最適な計画が近似され、意味のあるスライシング方向が保証される。
これらの輸送計画の連続的な緩和を利用して、モデルのパラメータとともにスライサパラメータをトレーニングするための勾配に基づく原始双対アプローチを可能にする。
固定長の置換不変表現に高次元埋め込みをプールするために、この制約付きスライシングアプローチをどのように適用できるかを実証する。
画像,点雲,タンパク質配列に基づいて学習した基礎モデルの数値計算結果から,より情報的なスライシング方向の学習における制約付き学習手法の有効性が示された。
実装コードはhttps://github.com/Stranja572/constrainedsweで確認できます。
関連論文リスト
- Differentiable Generalized Sliced Wasserstein Plans [10.764247782316984]
最適なトランスポート(OT)は、機械学習コミュニティに大きな関心を集めている。
min-SWGGと呼ばれる新しいスライシングスキームは、1次元のプランを元の多次元空間に戻す。
min-SWGGはスライシング手法の典型的な制限を継承することを示す。
本研究では,高次元設定においても最適スライスを効率的に同定するための微分可能近似法を提案する。
論文 参考訳(メタデータ) (2025-05-28T07:18:08Z) - Expected Sliced Transport Plans [9.33181953215826]
本研究では, 1次元の最適輸送計画を, もともとの空間に戻す「揚力」操作を提案する。
本研究では、EST計画を用いて、ある点から別の点へ移動する際のユークリッドの個々のコストの和を重み付けし、入力された離散確率測度間の有効距離を求めることを証明する。
論文 参考訳(メタデータ) (2024-10-16T02:44:36Z) - Sliced Wasserstein with Random-Path Projecting Directions [49.802024788196434]
本稿では,モンテカルロ予想推定のための高速サンプリングを行う最適化自由スライシング分布を提案する。
我々はランダムパススライシング分布(RPSD)とスライスされたワッサースタインの2つの変種、すなわちランダムパススライシングワッサースタイン(RPSW)とIWRPSW(Importance Weighted Random-Path Projection Sliced Wasserstein)を導出する。
論文 参考訳(メタデータ) (2024-01-29T04:59:30Z) - Measure transfer via stochastic slicing and matching [2.8851756275902476]
本稿では,スライシング・アンド・マッチ法によって定義される移動度と近似問題の反復的スキームについて検討する。
本論文の主な貢献はスライシング・アンド・マッチングスキームに対するほぼ確実な収束証明である。
論文 参考訳(メタデータ) (2023-07-11T18:12:30Z) - Linearized Wasserstein dimensionality reduction with approximation
guarantees [65.16758672591365]
LOT Wassmap は、ワーッサーシュタイン空間の低次元構造を明らかにするための計算可能なアルゴリズムである。
我々は,LOT Wassmapが正しい埋め込みを実現し,サンプルサイズの増加とともに品質が向上することを示す。
また、LOT Wassmapがペア距離計算に依存するアルゴリズムと比較して計算コストを大幅に削減することを示す。
論文 参考訳(メタデータ) (2023-02-14T22:12:16Z) - Amortized Projection Optimization for Sliced Wasserstein Generative
Models [17.196369579631074]
本稿では,2つのミニバッチ確率測度の情報伝達方向を予測するために,学習から最適化までの手法やアモータイズ最適化を提案する。
我々の知る限りでは、これは最適化とワッサーシュタイン生成モデルを橋渡しする最初の研究である。
論文 参考訳(メタデータ) (2022-03-25T02:08:51Z) - Distributed Sketching for Randomized Optimization: Exact
Characterization, Concentration and Lower Bounds [54.51566432934556]
我々はヘシアンの形成が困難である問題に対する分散最適化法を検討する。
ランダム化されたスケッチを利用して、問題の次元を減らし、プライバシを保ち、非同期分散システムにおけるストラグラーレジリエンスを改善します。
論文 参考訳(メタデータ) (2022-03-18T05:49:13Z) - Near-optimal estimation of smooth transport maps with kernel
sums-of-squares [81.02564078640275]
滑らかな条件下では、2つの分布の間の正方形ワッサーシュタイン距離は、魅力的な統計的誤差上界で効率的に計算できる。
生成的モデリングのような応用への関心の対象は、基礎となる最適輸送写像である。
そこで本研究では,地図上の統計的誤差であるL2$が,既存のミニマックス下限値とほぼ一致し,スムーズな地図推定が可能となる最初のトラクタブルアルゴリズムを提案する。
論文 参考訳(メタデータ) (2021-12-03T13:45:36Z) - Deep Shells: Unsupervised Shape Correspondence with Optimal Transport [52.646396621449]
本稿では,3次元形状対応のための教師なし学習手法を提案する。
提案手法は,複数のデータセット上での最先端技術よりも大幅に改善されていることを示す。
論文 参考訳(メタデータ) (2020-10-28T22:24:07Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。