論文の概要: Wasserstein GANs with Gradient Penalty Compute Congested Transport
- arxiv url: http://arxiv.org/abs/2109.00528v1
- Date: Wed, 1 Sep 2021 13:31:22 GMT
- ステータス: 処理完了
- システム内更新日: 2021-09-04 12:01:35.810661
- Title: Wasserstein GANs with Gradient Penalty Compute Congested Transport
- Title(参考訳): グラディエントペナルティ計算輸送を用いたワッサースタインGAN
- Authors: Tristan Milne and Adrian Nachman
- Abstract要約: WGAN-GPが最適輸送問題の最小値を計算するのはこれが初めてである。
渋滞輸送は、混雑を罰する輸送モデルの下で、一方の分布を他方に移動するコストを決定する。
WGAN-GPでは, サンプリング戦略により空間的に異なる成分が認められた。
- 参考スコア(独自算出の注目度): 6.09170287691728
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Wasserstein GANs with Gradient Penalty (WGAN-GP) are an extremely popular
method for training generative models to produce high quality synthetic data.
While WGAN-GP were initially developed to calculate the Wasserstein 1 distance
between generated and real data, recent works (e.g. Stanczuk et al. (2021))
have provided empirical evidence that this does not occur, and have argued that
WGAN-GP perform well not in spite of this issue, but because of it. In this
paper we show for the first time that WGAN-GP compute the minimum of a
different optimal transport problem, the so-called congested transport (Carlier
et al. (2008)). Congested transport determines the cost of moving one
distribution to another under a transport model that penalizes congestion. For
WGAN-GP, we find that the congestion penalty has a spatially varying component
determined by the sampling strategy used in Gulrajani et al. (2017) which acts
like a local speed limit, making congestion cost less in some regions than
others. This aspect of the congested transport problem is new in that the
congestion penalty turns out to be unbounded and depend on the distributions to
be transported, and so we provide the necessary mathematical proofs for this
setting. We use our discovery to show that the gradients of solutions to the
optimization problem in WGAN-GP determine the time averaged momentum of optimal
mass flow. This is in contrast to the gradients of Kantorovich potentials for
the Wasserstein 1 distance, which only determine the normalized direction of
flow. This may explain, in support of Stanczuk et al. (2021), the success of
WGAN-GP, since the training of the generator is based on these gradients.
- Abstract(参考訳): Wasserstein GANs with Gradient Penalty (WGAN-GP) は、高品質な合成データを生成するために生成モデルを訓練する非常に一般的な方法である。
WGAN-GPは当初、生成されたデータと実際のデータの間のワッサーシュタイン1距離を計算するために開発されたが、最近の研究(例)はそうである。
Stanczukなど。
(2021)は、この現象が起こらないという実証的な証拠を提供しており、WGAN-GPはこの問題にもかかわらず、その原因ではなく、うまく機能していると主張した。
本稿では,WGAN-GPが,渋滞輸送(Carlier et al)と呼ばれる,異なる最適輸送問題の最小値を計算するのを初めて示す。
(2008)).
混雑輸送は、渋滞を罰する輸送モデルの下である分布を別の分布に移動するコストを決定する。
WGAN-GPでは,Gulrajani et alで使用されるサンプリング戦略によって空間的に異なるペナルティが決定される。
(2017) 局部速度制限のように作用し, 渋滞コストを他の地域よりも低くする。
混雑する輸送問題のこの側面は、渋滞のペナルティが無制限であることが判明し、輸送対象の分布に依存するため、この設定に必要な数学的証明を提供するという点において、新しいものである。
我々は、WGAN-GPにおける最適化問題の解の勾配が最適質量流の時間平均運動量を決定することを示すために、我々の発見を用いる。
これはワッサーシュタイン1距離に対するカントロヴィチポテンシャルの勾配とは対照的であり、フローの正規化方向のみを決定する。
このことは、Stenczukらを支持して説明できる。
(2021) ジェネレータの訓練はこれらの勾配に基づいており, WGAN-GPが成功している。
関連論文リスト
- Short-term prediction of construction waste transport activities using AI-Truck [7.9472477567851465]
建設廃棄物運搬トラック(スラグトラック)は、都市部でよく見られる重厚なディーゼル車である。
本稿では, 都市規模でスラグトラック活動のレベルを重汚染発生時に予測する実践的問題に対処する。
ディープアンサンブル学習フレームワーク (coined AI-Truck) は,Bi-LSTM, TCN, STGCN, PDFormerをベース分類器として使用するソフト投票積分器を用いて設計されている。
論文 参考訳(メタデータ) (2023-12-07T13:38:55Z) - Fast Optimal Transport through Sliced Wasserstein Generalized Geodesics [14.259614797710224]
min-SWGGは2つの入力分布の最適1次元投影に基づく2乗WDのプロキシである。
min-SWGG は WD の上界であり、Sliced-Wasserstein と同様の複雑性を持つことを示す。
実証的な証拠は、様々な文脈におけるmin-SWGGの利点を支持する。
論文 参考訳(メタデータ) (2023-07-04T15:20:41Z) - Correlating sparse sensing for large-scale traffic speed estimation: A
Laplacian-enhanced low-rank tensor kriging approach [76.45949280328838]
本稿では,Laplacian enhanced Low-rank tensor (LETC) フレームワークを提案する。
次に,提案したモデルをネットワークワイド・クリグにスケールアップするために,複数の有効な数値手法を用いて効率的な解アルゴリズムを設計する。
論文 参考訳(メタデータ) (2022-10-21T07:25:57Z) - Sample-Efficient Optimisation with Probabilistic Transformer Surrogates [66.98962321504085]
本稿では,ベイズ最適化における最先端確率変換器の適用可能性について検討する。
トレーニング手順と損失定義から生じる2つの欠点を観察し、ブラックボックス最適化のプロキシとして直接デプロイすることを妨げる。
1)非一様分散点を前処理するBO調整トレーニング,2)予測性能を向上させるために最適な定常点をフィルタする新しい近似後正則整定器トレードオフ精度と入力感度を導入する。
論文 参考訳(メタデータ) (2022-05-27T11:13:17Z) - Application of WGAN-GP in recommendation and Questioning the relevance
of GAN-based approaches [0.0]
We proposeer system on Wasserstein GAN with Gradient Penalty (WGAN-GP)。
少なくとも精度の観点からは、元のGANの代わりにWGAN-GPを使用するという大きな利点の証拠は見つからない。
また、よく調整された概念上より単純な手法が、GANモデルよりもかなりの差で優れていることを示す簡単な実験も行います。
論文 参考訳(メタデータ) (2022-04-26T18:22:43Z) - Optimal 1-Wasserstein Distance for WGANs [2.1174215880331775]
有限標本とレジームの両方において、WGAN(Wasserstein GANs)を徹底的に解析する。
半離散状態における最適輸送理論の新たな結果を導出する。
論文 参考訳(メタデータ) (2022-01-08T13:04:03Z) - Near-optimal estimation of smooth transport maps with kernel
sums-of-squares [81.02564078640275]
滑らかな条件下では、2つの分布の間の正方形ワッサーシュタイン距離は、魅力的な統計的誤差上界で効率的に計算できる。
生成的モデリングのような応用への関心の対象は、基礎となる最適輸送写像である。
そこで本研究では,地図上の統計的誤差であるL2$が,既存のミニマックス下限値とほぼ一致し,スムーズな地図推定が可能となる最初のトラクタブルアルゴリズムを提案する。
論文 参考訳(メタデータ) (2021-12-03T13:45:36Z) - Do Neural Optimal Transport Solvers Work? A Continuous Wasserstein-2
Benchmark [133.46066694893318]
最適輸送のためのニューラルネットワークに基づく解法の性能を評価する。
既存の解法では,下流タスクでは良好に機能するにもかかわらず,最適な輸送マップを復元できないことがわかった。
論文 参考訳(メタデータ) (2021-06-03T15:59:28Z) - Variational Transport: A Convergent Particle-BasedAlgorithm for Distributional Optimization [106.70006655990176]
分散最適化問題は機械学習や統計学で広く発生する。
本稿では,変分輸送と呼ばれる粒子に基づく新しいアルゴリズムを提案する。
目的関数がpolyak-Lojasiewicz (PL) (Polyak, 1963) の機能バージョンと滑らかな条件を満たすとき、変分輸送は線形に収束することを示す。
論文 参考訳(メタデータ) (2020-12-21T18:33:13Z) - On Projection Robust Optimal Transport: Sample Complexity and Model
Misspecification [101.0377583883137]
射影ロバスト(PR)OTは、2つの測度の間のOTコストを最大化するために、射影可能な$k$次元部分空間を選択する。
私たちの最初の貢献は、PRワッサーシュタイン距離のいくつかの基本的な統計的性質を確立することである。
次に、部分空間を最適化するのではなく平均化することにより、PRW距離の代替として積分PRワッサーシュタイン距離(IPRW)を提案する。
論文 参考訳(メタデータ) (2020-06-22T14:35:33Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。