論文の概要: Anchor Space Optimal Transport as a Fast Solution to Multiple Optimal Transport Problems
- arxiv url: http://arxiv.org/abs/2310.16123v2
- Date: Wed, 29 Jan 2025 09:06:41 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-01-30 15:51:29.757477
- Title: Anchor Space Optimal Transport as a Fast Solution to Multiple Optimal Transport Problems
- Title(参考訳): 複数の最適輸送問題に対する高速解としてのアンカー空間最適輸送
- Authors: Jianming Huang, Xun Su, Zhongxi Fang, Hiroyuki Kasai,
- Abstract要約: 機械学習において、最適輸送(OT)理論は様々な応用の確率分布を比較するために広く利用されている。
現実的なシナリオでは、複数のOT問題を解く必要があることが多い。
本稿では,複数のOT問題を対象とした近似OT問題として,アンカー空間最適輸送(ASOT)問題を提案する。
- 参考スコア(独自算出の注目度): 12.674530639112405
- License:
- Abstract: In machine learning, Optimal Transport (OT) theory is extensively utilized to compare probability distributions across various applications, such as graph data represented by node distributions and image data represented by pixel distributions. In practical scenarios, it is often necessary to solve multiple OT problems. Traditionally, these problems are treated independently, with each OT problem being solved sequentially. However, the computational complexity required to solve a single OT problem is already substantial, making the resolution of multiple OT problems even more challenging. Although many applications of fast solutions to OT are based on the premise of a single OT problem with arbitrary distributions, few efforts handle such multiple OT problems with multiple distributions. Therefore, we propose the anchor space optimal transport (ASOT) problem: an approximate OT problem designed for multiple OT problems. This proposal stems from our finding that in many tasks the mass transport tends to be concentrated in a reduced space from the original feature space. By restricting the mass transport to a learned anchor point space, ASOT avoids pairwise instantiations of cost matrices for multiple OT problems and simplifies the problems by canceling insignificant transports. This simplification greatly reduces its computational costs. We then prove the upper bounds of its $1$-Wasserstein distance error between the proposed ASOT and the original OT problem under different conditions. Building upon this accomplishment, we propose three methods to learn anchor spaces for reducing the approximation error. Furthermore, our proposed methods present great advantages for handling distributions of different sizes with GPU parallelization.
- Abstract(参考訳): 機械学習において、最適輸送(OT)理論は、ノード分布で表されるグラフデータやピクセル分布で表される画像データなど、様々なアプリケーションにわたる確率分布を比較するために広く利用されている。
現実的なシナリオでは、複数のOT問題を解く必要があることが多い。
伝統的にこれらの問題は独立に扱われ、各OT問題は順次解決される。
しかし、1つのOT問題を解くのに必要な計算量はすでにかなり複雑であり、複数のOT問題の解法はより困難である。
OTに対する高速解の多くの応用は、任意の分布を持つ単一OT問題の前提に基づいているが、複数の分布を持つ複数のOT問題に対処する取り組みはほとんどない。
そこで本研究では,複数のOT問題を対象とした近似OT問題として,アンカー空間最適輸送(ASOT)問題を提案する。
この提案は、多くのタスクにおいて、マストランスポートは元の特徴空間から還元された空間に集中する傾向があるという我々の発見に由来する。
学習したアンカー点空間への質量輸送を制限することにより、ASOTは複数のOT問題に対するコスト行列のペアのインスタンス化を回避し、重要な輸送をキャンセルすることで問題を単純化する。
この単純化は計算コストを大幅に削減する。
次に、提案したASOTと元のOT問題の間の1ドルワッサースタイン距離誤差の上限を異なる条件で証明する。
この成果に基づいて,近似誤差を低減するために,アンカー空間を学習する3つの手法を提案する。
さらに,提案手法は,GPU並列化により異なる大きさの分布を扱う上で大きな利点を示す。
関連論文リスト
- A Specialized Semismooth Newton Method for Kernel-Based Optimal
Transport [92.96250725599958]
カーネルベース最適輸送(OT)推定器は、サンプルからOT問題に対処するための代替的機能的推定手順を提供する。
SSN法は, 標準正規性条件下でのグローバル収束率$O (1/sqrtk)$, 局所二次収束率を達成できることを示す。
論文 参考訳(メタデータ) (2023-10-21T18:48:45Z) - Energy-Guided Continuous Entropic Barycenter Estimation for General Costs [95.33926437521046]
任意のOTコスト関数に対して連続的エントロピーOT(EOT)バリセンタを近似する新しいアルゴリズムを提案する。
本手法は、弱いOTに基づくEOT問題の二重再構成に基づいている。
論文 参考訳(メタデータ) (2023-10-02T11:24:36Z) - Building the Bridge of Schr\"odinger: A Continuous Entropic Optimal
Transport Benchmark [96.06787302688595]
提案手法は, 基本真理 OT 解が構成によって知られている確率分布のペアを作成する方法である。
これらのベンチマークペアを使用して、既存のニューラルネットワーク EOT/SB ソルバが実際に EOT ソリューションをどれだけよく計算しているかをテストする。
論文 参考訳(メタデータ) (2023-06-16T20:03:36Z) - Light Unbalanced Optimal Transport [69.18220206873772]
既存の解法は、原理に基づいているか、複数のニューラルネットワークを含む複雑な最適化目標を重み付けしている。
我々は,この解法がUEOT解の普遍近似を提供し,一般化限界を得ることを示す。
論文 参考訳(メタデータ) (2023-03-14T15:44:40Z) - Sliced Optimal Partial Transport [13.595857406165292]
1次元の2つの非負測度間の最適部分輸送問題を計算するための効率的なアルゴリズムを提案する。
種々の数値実験において,スライス OPT 方式の計算と精度の利点を実証した。
論文 参考訳(メタデータ) (2022-12-15T18:55:23Z) - Unbalanced Optimal Transport, from Theory to Numerics [0.0]
我々は、不均衡なOT、エントロピー正則化、Gromov-Wasserstein (GW) が、データサイエンスの効率的な幾何学的損失関数にOTを変換するために、ハンドインで機能すると主張している。
このレビューの主な動機は、不均衡なOT、エントロピー正則化、GWがいかに協力してOTをデータ科学の効率的な幾何学的損失関数に変えるかを説明することである。
論文 参考訳(メタデータ) (2022-11-16T09:02:52Z) - Entropic Neural Optimal Transport via Diffusion Processes [105.34822201378763]
本稿では,連続確率分布間のエントロピー最適輸送(EOT)計画を計算するための新しいアルゴリズムを提案する。
提案アルゴリズムは,シュリンガーブリッジ問題(Schr"odinger Bridge problem)として知られるEOTの動的バージョンのサドル点再構成に基づく。
大規模EOTの従来の手法とは対照的に,我々のアルゴリズムはエンドツーエンドであり,単一の学習ステップで構成されている。
論文 参考訳(メタデータ) (2022-11-02T14:35:13Z) - Sparsity-Constrained Optimal Transport [27.76137474217754]
正規化された最適輸送は、ニューラルネットワークの損失層やマッチング層として、ますます利用されている。
本稿では,交通計画に明示的な基数制約を課したOTに対する新しいアプローチを提案する。
本手法は,非正規化OT($k$の場合)と二次正規化OT($k$が十分に大きい場合)の中間地盤と考えることができる。
論文 参考訳(メタデータ) (2022-09-30T13:39:47Z) - Low-rank Optimal Transport: Approximation, Statistics and Debiasing [51.50788603386766]
フロゼットボン2021ローランで提唱された低ランク最適輸送(LOT)アプローチ
LOTは興味のある性質と比較した場合、エントロピー正則化の正当な候補と見なされる。
本稿では,これらの領域のそれぞれを対象とし,計算OTにおける低ランクアプローチの影響を補強する。
論文 参考訳(メタデータ) (2022-05-24T20:51:37Z) - Learning Cost Functions for Optimal Transport [44.64193016158591]
逆最適輸送(英: Inverse optimal transport, OT)とは、観測された輸送計画またはそのサンプルから、OTのコスト関数を学習する問題を指す。
逆OT問題の制約のない凸最適化式を導出し、任意のカスタマイズ可能な正規化によりさらに拡張することができる。
論文 参考訳(メタデータ) (2020-02-22T07:27:17Z) - Regularized Optimal Transport is Ground Cost Adversarial [34.81915836064636]
最適輸送問題の正則化は, 地価逆数と解釈できることを示す。
これにより、地上空間上のロバストな異性度測度にアクセスでき、他のアプリケーションで使用することができる。
論文 参考訳(メタデータ) (2020-02-10T17:28:35Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。