論文の概要: Overcoming Mode Collapse with Adaptive Multi Adversarial Training
- arxiv url: http://arxiv.org/abs/2112.14406v1
- Date: Wed, 29 Dec 2021 05:57:55 GMT
- ステータス: 処理完了
- システム内更新日: 2021-12-30 22:26:48.639834
- Title: Overcoming Mode Collapse with Adaptive Multi Adversarial Training
- Title(参考訳): adaptive multi adversarial trainingによるモード崩壊の克服
- Authors: Karttikeya Mangalam, Rohin Garg
- Abstract要約: GAN(Generative Adversarial Networks)は、様々なアプリケーションで使用される生成モデルのクラスである。
GANは、ターゲット分布のいくつかのモードがジェネレータによって無視されるモード崩壊問題に悩まされていることが知られている。
本稿では,従来の世代形態を記憶するために,新たな差別者を適応的に生成する新たな訓練手法を提案する。
- 参考スコア(独自算出の注目度): 5.09817514580101
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Generative Adversarial Networks (GANs) are a class of generative models used
for various applications, but they have been known to suffer from the mode
collapse problem, in which some modes of the target distribution are ignored by
the generator. Investigative study using a new data generation procedure
indicates that the mode collapse of the generator is driven by the
discriminator's inability to maintain classification accuracy on previously
seen samples, a phenomenon called Catastrophic Forgetting in continual
learning. Motivated by this observation, we introduce a novel training
procedure that adaptively spawns additional discriminators to remember previous
modes of generation. On several datasets, we show that our training scheme can
be plugged-in to existing GAN frameworks to mitigate mode collapse and improve
standard metrics for GAN evaluation.
- Abstract(参考訳): GAN(Generative Adversarial Networks)は、様々なアプリケーションで使用される生成モデルの一種であるが、ターゲット分布のモードがジェネレータによって無視されるモード崩壊問題に悩まされていることが知られている。
新たなデータ生成手法を用いた調査研究により、ジェネレータのモード崩壊は、識別器が以前に見られたサンプルの分類精度を維持できないことによるものであることが示された。
この観察に動機づけられ,従来の世代を記憶するための識別器を適応的に生成する新しい訓練手順を提案する。
いくつかのデータセットでは、既存のGANフレームワークにトレーニングスキームをプラグインしてモード崩壊を緩和し、GAN評価のための標準メトリクスを改善することができる。
関連論文リスト
- Joint Diffusion models in Continual Learning [4.013156524547073]
共同拡散モデルに基づく生成的リハーサルを用いた連続学習法であるJDCLを紹介する。
生成的再生に基づく連続学習手法は、生成的モデルからサンプリングされた新しいデータとリハーサルデータを組み合わせたモデルの再学習によってこの問題を緩和しようとする。
このような共有パラメトリゼーションと知識蒸留技術を組み合わせることで、破滅的な忘れをせずに新しいタスクに安定した適応ができることを示す。
論文 参考訳(メタデータ) (2024-11-12T22:35:44Z) - Mode-Aware Continual Learning for Conditional Generative Adversarial
Networks [27.28511396131235]
本稿では,条件付き生成対向ネットワークのための新しい連続学習手法を提案する。
まず、ジェネレータは、その後の再生のための既存のモードのサンプルを生成する。
判別器はモード類似度尺度を計算するのに使用される。
目標モードのラベルを生成し、このセット内のラベルの重み付き平均として付与する。
論文 参考訳(メタデータ) (2023-05-19T03:00:31Z) - Reduce, Reuse, Recycle: Compositional Generation with Energy-Based Diffusion Models and MCMC [102.64648158034568]
拡散モデルは、多くの領域において、生成モデリングの一般的なアプローチとなっている。
本稿では,新しい構成演算子の利用を可能にする拡散モデルのエネルギーベースパラメータ化を提案する。
これらのサンプルは、幅広い問題にまたがって構成生成の顕著な改善につながっている。
論文 参考訳(メタデータ) (2023-02-22T18:48:46Z) - on the effectiveness of generative adversarial network on anomaly
detection [1.6244541005112747]
GANは、実際のトレーニング分布を特定するために、これらのモデルのリッチなコンテキスト情報に依存している。
本稿では,自動エンコーダとGANを組み合わせた新しい教師なしモデルを提案する。
識別器の内部表現と生成器の視覚表現の線形結合と、オートエンコーダの符号化表現とを組み合わせて、提案した異常スコアを定義する。
論文 参考訳(メタデータ) (2021-12-31T16:35:47Z) - Non-Exhaustive Learning Using Gaussian Mixture Generative Adversarial
Networks [3.040775019394542]
我々は、新しいオンライン非排他的学習モデル、すなわち、非排他的ガウス混合生成適応ネットワーク(NE-GM-GAN)を提案する。
提案モデルでは,GANなどの深層生成モデル上での潜在表現を合成し,テストデータ中の新しいクラスのインスタンスをインクリメンタルに検出する。
論文 参考訳(メタデータ) (2021-06-28T00:20:22Z) - Task-agnostic Continual Learning with Hybrid Probabilistic Models [75.01205414507243]
分類のための連続学習のためのハイブリッド生成識別手法であるHCLを提案する。
フローは、データの配布を学習し、分類を行い、タスクの変更を特定し、忘れることを避けるために使用される。
本研究では,スプリット-MNIST,スプリット-CIFAR,SVHN-MNISTなどの連続学習ベンチマークにおいて,HCLの強い性能を示す。
論文 参考訳(メタデータ) (2021-06-24T05:19:26Z) - Demonstrating the Evolution of GANs through t-SNE [0.4588028371034407]
COEGANのような進化的アルゴリズムは、最近、GANトレーニングを改善するソリューションとして提案されている。
本研究では, t-distributed Neighbour Embedding (t-SNE) を用いたGANの進展評価手法を提案する。
結果の t-SNE マップと Jaccard インデックスに基づく計量をモデル品質を表すために提案する。
論文 参考訳(メタデータ) (2021-01-31T20:07:08Z) - Understanding Classifier Mistakes with Generative Models [88.20470690631372]
ディープニューラルネットワークは教師付き学習タスクに有効であるが、脆弱であることが示されている。
本稿では、生成モデルを利用して、分類器が一般化に失敗するインスタンスを特定し、特徴付ける。
我々のアプローチは、トレーニングセットのクラスラベルに依存しないため、半教師付きでトレーニングされたモデルに適用できる。
論文 参考訳(メタデータ) (2020-10-05T22:13:21Z) - GANs with Variational Entropy Regularizers: Applications in Mitigating
the Mode-Collapse Issue [95.23775347605923]
深層学習の成功に基づいて、GAN(Generative Adversarial Networks)は、観測されたサンプルから確率分布を学習するための現代的なアプローチを提供する。
GANはしばしば、ジェネレータが入力分布の既存のすべてのモードをキャプチャできないモード崩壊問題に悩まされる。
情報理論のアプローチを採り、生成したサンプルのエントロピーの変動的下限を最大化し、それらの多様性を増大させる。
論文 参考訳(メタデータ) (2020-09-24T19:34:37Z) - Unsupervised Controllable Generation with Self-Training [90.04287577605723]
GANによる制御可能な世代は依然として困難な研究課題である。
本稿では,自己学習を通じてジェネレータを制御する潜伏符号の分布を学習するための教師なしフレームワークを提案する。
我々のフレームワークは、変分オートエンコーダのような他の変種と比較して、より良い絡み合いを示す。
論文 参考訳(メタデータ) (2020-07-17T21:50:35Z) - Unsupervised Anomaly Detection with Adversarial Mirrored AutoEncoders [51.691585766702744]
本稿では,識別器のミラー化ワッサースタイン損失を利用して,よりセマンティックレベルの再構築を行う逆自動エンコーダの変種を提案する。
我々は,再建基準の代替として,異常スコアの代替尺度を提案した。
提案手法は,OOD検出ベンチマークにおける異常検出の最先端手法よりも優れている。
論文 参考訳(メタデータ) (2020-03-24T08:26:58Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。