論文の概要: Monge, Bregman and Occam: Interpretable Optimal Transport in
High-Dimensions with Feature-Sparse Maps
- arxiv url: http://arxiv.org/abs/2302.04065v1
- Date: Wed, 8 Feb 2023 14:02:34 GMT
- ステータス: 処理完了
- システム内更新日: 2023-02-09 16:22:30.254611
- Title: Monge, Bregman and Occam: Interpretable Optimal Transport in
High-Dimensions with Feature-Sparse Maps
- Title(参考訳): Monge, Bregman, Occam:特徴空間マップを用いた高次元の最適輸送の解釈
- Authors: Marco Cuturi, Michal Klein, Pierre Ablin
- Abstract要約: 我々は、$tau$ のスパース性誘導ノルムを選択すると、Occam のカミソリを輸送に応用する写像が得られることを示した。
本稿では,高次元単細胞転写データに対して有意なマップを推定する手法について紹介する。
- 参考スコア(独自算出の注目度): 37.45959537338404
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Optimal transport (OT) theory focuses, among all maps
$T:\mathbb{R}^d\rightarrow \mathbb{R}^d$ that can morph a probability measure
onto another, on those that are the ``thriftiest'', i.e. such that the averaged
cost $c(x, T(x))$ between $x$ and its image $T(x)$ be as small as possible.
Many computational approaches have been proposed to estimate such Monge maps
when $c$ is the $\ell_2^2$ distance, e.g., using entropic maps [Pooladian'22],
or neural networks [Makkuva'20, Korotin'20]. We propose a new model for
transport maps, built on a family of translation invariant costs $c(x,
y):=h(x-y)$, where $h:=\tfrac{1}{2}\|\cdot\|_2^2+\tau$ and $\tau$ is a
regularizer. We propose a generalization of the entropic map suitable for $h$,
and highlight a surprising link tying it with the Bregman centroids of the
divergence $D_h$ generated by $h$, and the proximal operator of $\tau$. We show
that choosing a sparsity-inducing norm for $\tau$ results in maps that apply
Occam's razor to transport, in the sense that the displacement vectors
$\Delta(x):= T(x)-x$ they induce are sparse, with a sparsity pattern that
varies depending on $x$. We showcase the ability of our method to estimate
meaningful OT maps for high-dimensional single-cell transcription data, in the
$34000$-$d$ space of gene counts for cells, without using dimensionality
reduction, thus retaining the ability to interpret all displacements at the
gene level.
- Abstract(参考訳): 最適輸送 (OT) 理論は、すべての写像 $T:\mathbb{R}^d\rightarrow \mathbb{R}^d$ において、確率測度を ``thriftiest'' であるもの、すなわち平均的なコスト $c(x, T) に変形させることができることに焦点をあてる。
(x))$-$x$とその画像$t
(x)$ をできるだけ小さくする。
例えば、エントロピー写像 [Pooladian'22] やニューラルネットワーク [Makkuva'20, Korotin'20] を用いて、$c$が$\ell_2^2$ 距離であるときに、そのようなモンジュ写像を推定する多くの計算手法が提案されている。
本研究では, 変換不変コスト$c(x, ) の族を基礎とした輸送写像の新しいモデルを提案する。
h:=\tfrac{1}{2}\|\cdot\|_2^2+\tau$ であり、$\tau$ は正規化である。
我々は、h$ に適したエントロピー写像の一般化を提案し、h$ によって生成される発散値 $d_h$ のbregman centroid と、$\tau$ の近位作用素との驚くべきリンクを強調する。
我々は、変位ベクトルが$\Delta であるという意味で、Occam's razor を輸送に適用する写像において、$\tau$ に対してスパース性誘導ノルムを選択することを示す。
(x):=T
(x)-x$ は sparse であり、$x$ に依存するスパーシティパターンがある。
我々は,高次元単細胞転写データに対する意味のあるOTマップを,次元的縮小を使わずに34000$-d$の細胞数空間で推定できることを示し,遺伝子レベルでの全ての変位を解釈する能力を保持する。
関連論文リスト
- Optimal Sketching for Residual Error Estimation for Matrix and Vector Norms [50.15964512954274]
線形スケッチを用いた行列とベクトルノルムの残差誤差推定問題について検討する。
これは、前作とほぼ同じスケッチサイズと精度で、経験的にかなり有利であることを示す。
また、スパースリカバリ問題に対して$Omega(k2/pn1-2/p)$低いバウンダリを示し、これは$mathrmpoly(log n)$ factorまで厳密である。
論文 参考訳(メタデータ) (2024-08-16T02:33:07Z) - Learning Elastic Costs to Shape Monge Displacements [39.381326738705255]
モンスター問題は、一方の分布をもう一方にマップする最も効率的な方法を見つけるように要求する。
弾力性のあるコストは、Monge mapのtextitdisplacementsを$T$にします。
本稿では,モンジュマップを最適に計算するための数値計算法を提案する。
論文 参考訳(メタデータ) (2023-06-20T21:17:32Z) - The Monge Gap: A Regularizer to Learn All Transport Maps [34.81915836064636]
ブレニエの定理は、地価が二乗ユークリッド距離であるとき、$mathcalP(Rd)$で連続測度を変形させるベストの写像は凸函数の勾配でなければならないというものである。
数学的優雅さにもかかわらず、ICNNにOTマップを組み込むことは多くの課題を提起する。
我々は、OTマップを推定するアプローチを根本的に異なるアプローチで提案する。
論文 参考訳(メタデータ) (2023-02-09T21:56:11Z) - A spectral least-squares-type method for heavy-tailed corrupted
regression with unknown covariance \& heterogeneous noise [2.019622939313173]
重み付き最小二乗線形回帰は、少なくとも$epsilon n$ arbitrary outliersの$n$のラベル特徴サンプルを破損させたと仮定して再検討する。
本稿では,$(Sigma,Xi) や $Xi$ の演算ノルムに関する知識を前提に,電力法に基づくほぼ最適に計算可能な推定器を提案する。
論文 参考訳(メタデータ) (2022-09-06T23:37:31Z) - Supervised Training of Conditional Monge Maps [107.78770597815242]
最適輸送(OT)理論は、多くの可能な選択の中から確率測度を他のものにマッピングする最も効率的な方法を定義し、選択する一般的な原理を記述している。
本研究では,コンテキスト変数に条件付きOTマップの族を推定するマルチタスク手法であるCondOTを紹介する。
本研究では,CondOTの遺伝的・治療的摂動の任意の組み合わせが単一細胞に与える影響を推測する能力を示す。
論文 参考訳(メタデータ) (2022-06-28T19:34:44Z) - Random matrices in service of ML footprint: ternary random features with
no performance loss [55.30329197651178]
我々は、$bf K$ の固有スペクトルが$bf w$ の i.d. 成分の分布とは独立であることを示す。
3次ランダム特徴(TRF)と呼ばれる新しいランダム手法を提案する。
提案したランダムな特徴の計算には乗算が不要であり、古典的なランダムな特徴に比べてストレージに$b$のコストがかかる。
論文 参考訳(メタデータ) (2021-10-05T09:33:49Z) - Sparse sketches with small inversion bias [79.77110958547695]
逆バイアスは、逆の共分散に依存する量の推定を平均化するときに生じる。
本研究では、確率行列に対する$(epsilon,delta)$-unbiased estimatorという概念に基づいて、逆バイアスを解析するためのフレームワークを開発する。
スケッチ行列 $S$ が密度が高く、すなわちサブガウスのエントリを持つとき、$(epsilon,delta)$-unbiased for $(Atop A)-1$ は $m=O(d+sqrt d/ のスケッチを持つ。
論文 参考訳(メタデータ) (2020-11-21T01:33:15Z) - Linear Time Sinkhorn Divergences using Positive Features [51.50788603386766]
エントロピー正則化で最適な輸送を解くには、ベクトルに繰り返し適用される$ntimes n$ kernel matrixを計算する必要がある。
代わりに、$c(x,y)=-logdotpvarphi(x)varphi(y)$ ここで$varphi$は、地上空間から正のorthant $RRr_+$への写像であり、$rll n$である。
論文 参考訳(メタデータ) (2020-06-12T10:21:40Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。