論文の概要: Linear Partial Gromov-Wasserstein Embedding
- arxiv url: http://arxiv.org/abs/2410.16669v1
- Date: Tue, 22 Oct 2024 03:54:52 GMT
- ステータス: 翻訳完了
- システム内更新日: 2024-10-23 14:27:23.856728
- Title: Linear Partial Gromov-Wasserstein Embedding
- Title(参考訳): リニア部分グロモフ-ワッセルシュタイン埋め込み
- Authors: Yikun Bai, Abihith Kothapalli, Hengrong Du, Rocio Diaz Martin, Soheil Kolouri,
- Abstract要約: Gromov Wasserstein(GW)問題は、機械学習とデータサイエンスコミュニティへの関心が高まっている。
PGW問題に対する線形化埋め込み手法であるGromov Wasserstein埋め込みを提案する。
古典的 OT 問題に対する線形化手法と同様に、LPGW が計量測度空間の有効な計量を定義することを証明している。
- 参考スコア(独自算出の注目度): 8.23887869467319
- License:
- Abstract: The Gromov Wasserstein (GW) problem, a variant of the classical optimal transport (OT) problem, has attracted growing interest in the machine learning and data science communities due to its ability to quantify similarity between measures in different metric spaces. However, like the classical OT problem, GW imposes an equal mass constraint between measures, which restricts its application in many machine learning tasks. To address this limitation, the partial Gromov-Wasserstein (PGW) problem has been introduced, which relaxes the equal mass constraint, enabling the comparison of general positive Radon measures. Despite this, both GW and PGW face significant computational challenges due to their non-convex nature. To overcome these challenges, we propose the linear partial Gromov-Wasserstein (LPGW) embedding, a linearized embedding technique for the PGW problem. For $K$ different metric measure spaces, the pairwise computation of the PGW distance requires solving the PGW problem $\mathcal{O}(K^2)$ times. In contrast, the proposed linearization technique reduces this to $\mathcal{O}(K)$ times. Similar to the linearization technique for the classical OT problem, we prove that LPGW defines a valid metric for metric measure spaces. Finally, we demonstrate the effectiveness of LPGW in practical applications such as shape retrieval and learning with transport-based embeddings, showing that LPGW preserves the advantages of PGW in partial matching while significantly enhancing computational efficiency.
- Abstract(参考訳): 古典的最適輸送(OT)問題の変種であるグロモフ・ワッサースタイン(Gromov Wasserstein)問題(GW)は、異なる距離空間における測度間の類似性を定量化できることから、機械学習とデータサイエンスコミュニティへの関心が高まっている。
しかし、古典的なOT問題と同様に、GWは測度間に等しい質量制限を課し、多くの機械学習タスクにおけるその適用を制限する。
この制限に対処するため、Gromov-Wasserstein (PGW) 問題が導入され、同じ質量制約を緩和し、一般的な正のラドン測度の比較を可能にした。
それにもかかわらず、GWとPGWは、非凸性のため、大きな計算課題に直面している。
これらの課題を克服するために,線形部分的なGromov-Wasserstein (LPGW) 埋め込みを提案する。
K$異なる計量測度空間の場合、PGW距離のペアワイズ計算は、PGW問題を$\mathcal{O}(K^2)$ timesで解く必要がある。
対照的に、提案された線形化手法は、これを$\mathcal{O}(K)$ timesに還元する。
古典的 OT 問題に対する線形化手法と同様に、LPGW が計量測度空間の有効な計量を定義することを証明している。
最後に,輸送型埋め込みを用いた形状検索や学習などの実用化におけるLPGWの有効性を実証し,計算効率を著しく向上させながら部分マッチングにおけるPGWの利点を保っていることを示す。
関連論文リスト
- Metric properties of partial and robust Gromov-Wasserstein distances [3.9485589956945204]
グロモフ=ワッサーシュタイン距離(Gromov-Wasserstein distance, GW)は、最適な輸送のアイデアに基づいて、メトリクスの族を定義する。
GW距離は本質的に外れ音に敏感であり、部分的マッチングに対応できない。
我々の新しい距離は真の測度を定義し、それらがGW距離と同じ位相を誘導し、摂動にさらなる堅牢性をもたらすことを示す。
論文 参考訳(メタデータ) (2024-11-04T15:53:45Z) - GWQ: Gradient-Aware Weight Quantization for Large Language Models [61.17678373122165]
勾配対応重み量子化(GWQ)は、勾配を利用して外れ値の局所化を行う、低ビット重み量子化のための最初の量子化手法である。
GWQはFP16精度で上位1%の外れ値に対応し、残りの非外れ値重みは低ビットフォーマットで格納される。
ゼロショットタスクでは、GWQ量子化モデルは他の量子化法よりも精度が高い。
論文 参考訳(メタデータ) (2024-10-30T11:16:04Z) - Partial Gromov-Wasserstein Metric [8.503892585556901]
近年、Gromov-Wasserstein(GW)距離は機械学習コミュニティへの関心が高まっている。
我々は、部分グロモフ・ワッサーシュタイン(PGW)と呼ばれるUGW問題の特定の事例を提案する。
論文 参考訳(メタデータ) (2024-02-06T03:36:05Z) - Outlier-Robust Gromov-Wasserstein for Graph Data [31.895380224961464]
我々は、Gromov-Wasserstein (GW) 距離のRGWと呼ばれる新しい頑健なバージョンを導入する。
RGWは、クルバック・リーバーの発散に基づくあいまいさ集合の中で楽観的に摂動する限界制約を特徴とする。
サブグラフマッチングや部分形状対応などの実世界のグラフ学習におけるRGWの有効性を示す。
論文 参考訳(メタデータ) (2023-02-09T12:57:29Z) - Learning to Solve PDE-constrained Inverse Problems with Graph Networks [51.89325993156204]
科学と工学にまたがる多くの応用分野において、偏微分方程式(PDE)によって定義される制約で逆問題を解決することに興味がある。
ここでは、これらのPDE制約された逆問題を解決するために、GNNを探索する。
GNNを用いて計算速度を最大90倍に向上させる。
論文 参考訳(メタデータ) (2022-06-01T18:48:01Z) - Efficient Approximation of Gromov-Wasserstein Distance using Importance
Sparsification [34.865115235547286]
本稿では,Gromov-Wasserstein距離を効率的に近似するために,Spar-GWと呼ばれる新しい重要空間分割法を提案する。
Spar-GW法は任意の地価でGW距離に適用可能であることを示す。
さらに、この方法は、エントロピーGW距離、融合GW距離、不均衡GW距離を含むGW距離の変種を近似するために拡張することができる。
論文 参考訳(メタデータ) (2022-05-26T18:30:40Z) - Low-rank Optimal Transport: Approximation, Statistics and Debiasing [51.50788603386766]
フロゼットボン2021ローランで提唱された低ランク最適輸送(LOT)アプローチ
LOTは興味のある性質と比較した場合、エントロピー正則化の正当な候補と見なされる。
本稿では,これらの領域のそれぞれを対象とし,計算OTにおける低ランクアプローチの影響を補強する。
論文 参考訳(メタデータ) (2022-05-24T20:51:37Z) - Quantized Gromov-Wasserstein [10.592277756185046]
Quantized Gromov Wasserstein(qGW)は、部品を基本的なオブジェクトとして扱い、問題の理論上の上限の階層に収まるメトリクスです。
最適なgwマッチングを近似するアルゴリズムを開発し,アルゴリズムによる高速化とメモリ複雑性の低減を実現する。
我々は、最先端の状況を超えて、既存の文献よりも桁違いに大きいスケールでGWマッチングを適用することができる。
論文 参考訳(メタデータ) (2021-04-05T17:03:20Z) - On Projection Robust Optimal Transport: Sample Complexity and Model
Misspecification [101.0377583883137]
射影ロバスト(PR)OTは、2つの測度の間のOTコストを最大化するために、射影可能な$k$次元部分空間を選択する。
私たちの最初の貢献は、PRワッサーシュタイン距離のいくつかの基本的な統計的性質を確立することである。
次に、部分空間を最適化するのではなく平均化することにより、PRW距離の代替として積分PRワッサーシュタイン距離(IPRW)を提案する。
論文 参考訳(メタデータ) (2020-06-22T14:35:33Z) - Targeted free energy estimation via learned mappings [66.20146549150475]
自由エネルギー摂動 (FEP) は60年以上前にズワンツィヒによって自由エネルギー差を推定する方法として提案された。
FEPは、分布間の十分な重複の必要性という厳しい制限に悩まされている。
目標自由エネルギー摂動(Targeted Free Energy Perturbation)と呼ばれるこの問題を緩和するための1つの戦略は、オーバーラップを増やすために構成空間の高次元マッピングを使用する。
論文 参考訳(メタデータ) (2020-02-12T11:10:00Z) - Fast and Robust Comparison of Probability Measures in Heterogeneous
Spaces [62.35667646858558]
本稿では, アンカー・エナジー (AE) とアンカー・ワッサースタイン (AW) 距離を紹介する。
我々の主な貢献は、素案実装が立方体となる対数四重項時間でAEを正確に計算するスイープラインアルゴリズムを提案することである。
AE と AW は,一般的な GW 近似の計算コストのごく一部において,様々な実験環境において良好に動作することを示す。
論文 参考訳(メタデータ) (2020-02-05T03:09:23Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。