論文の概要: Generative Oversampling for Imbalanced Data via Majority-Guided VAE
- arxiv url: http://arxiv.org/abs/2302.10910v1
- Date: Tue, 14 Feb 2023 06:35:23 GMT
- ステータス: 処理完了
- システム内更新日: 2023-02-26 13:30:40.666975
- Title: Generative Oversampling for Imbalanced Data via Majority-Guided VAE
- Title(参考訳): 多数誘導vaeによる不均衡データの生成オーバーサンプリング
- Authors: Qingzhong Ai, Pengyun Wang, Lirong He, Liangjian Wen, Lujia Pan,
Zenglin Xu
- Abstract要約: 本稿では,多数派の指導のもと,新たなマイノリティサンプルを生成する,Majority-Guided VAE(MGVAE)と呼ばれる新しいオーバーサンプリングモデルを提案する。
このようにして、新しく生成されたマイノリティサンプルは、大多数のサンプルの多様性と豊かさを継承することができ、下流タスクにおける過度な適合を軽減できる。
- 参考スコア(独自算出の注目度): 15.93867386081279
- License: http://creativecommons.org/publicdomain/zero/1.0/
- Abstract: Learning with imbalanced data is a challenging problem in deep learning.
Over-sampling is a widely used technique to re-balance the sampling
distribution of training data. However, most existing over-sampling methods
only use intra-class information of minority classes to augment the data but
ignore the inter-class relationships with the majority ones, which is prone to
overfitting, especially when the imbalance ratio is large. To address this
issue, we propose a novel over-sampling model, called Majority-Guided
VAE~(MGVAE), which generates new minority samples under the guidance of a
majority-based prior. In this way, the newly generated minority samples can
inherit the diversity and richness of the majority ones, thus mitigating
overfitting in downstream tasks. Furthermore, to prevent model collapse under
limited data, we first pre-train MGVAE on sufficient majority samples and then
fine-tune based on minority samples with Elastic Weight Consolidation(EWC)
regularization. Experimental results on benchmark image datasets and real-world
tabular data show that MGVAE achieves competitive improvements over other
over-sampling methods in downstream classification tasks, demonstrating the
effectiveness of our method.
- Abstract(参考訳): 不均衡なデータによる学習は、ディープラーニングにおいて難しい問題である。
オーバーサンプリングはトレーニングデータのサンプリング分布を再バランスさせる手法として広く用いられている。
しかし、既存のオーバーサンプリング手法の多くは、マイノリティクラスのクラス内情報のみを使用してデータを増強するが、多数派とのクラス間関係を無視し、特に不均衡比が大きい場合、過度に適合する傾向にある。
この問題に対処するため,多数派の指導の下で新たなマイノリティサンプルを生成する,Majority-Guided VAE~(MGVAE)と呼ばれる新しいオーバーサンプリングモデルを提案する。
このようにして、新しく生成されたマイノリティサンプルは、大多数のサンプルの多様性と豊かさを継承することができ、下流タスクにおける過度な適合を軽減できる。
さらに,限定データ下でのモデル崩壊を防止するために,まず十分な多数サンプルでmgvaeを事前訓練し,その後,弾性重み和(ewc)正規化を伴う少数サンプルに基づいて微調整を行った。
ベンチマーク画像データセットと実世界の表データによる実験結果から,mgvaeは下流分類タスクにおける他のオーバーサンプリング手法よりも競争力が向上し,本手法の有効性が示された。
関連論文リスト
- Self-Guided Generation of Minority Samples Using Diffusion Models [57.319845580050924]
データ多様体の低密度領域に居住する少数サンプルを生成するための新しい手法を提案する。
我々のフレームワークは拡散モデルに基づいて構築されており、ガイドドサンプリングの原理を生かしている。
実データセットのベンチマーク実験により、我々のアプローチは現実的な低自由度マイノリティインスタンスを作成する能力を大幅に改善できることが示された。
論文 参考訳(メタデータ) (2024-07-16T10:03:29Z) - Tackling Diverse Minorities in Imbalanced Classification [80.78227787608714]
不均衡データセットは、様々な現実世界のアプリケーションで一般的に見られ、分類器の訓練において重要な課題が提示されている。
マイノリティクラスとマイノリティクラスの両方のデータサンプルを混合することにより、反復的に合成サンプルを生成することを提案する。
提案するフレームワークの有効性を,7つの公開ベンチマークデータセットを用いて広範な実験により実証する。
論文 参考訳(メタデータ) (2023-08-28T18:48:34Z) - Don't Play Favorites: Minority Guidance for Diffusion Models [59.75996752040651]
本稿では,拡散モデルの生成過程をマイノリティ標本に集中させる新しい枠組みを提案する。
我々は、所望の確率レベルを持つ領域に向けて生成過程をガイドできるサンプリング技術であるマイノリティガイダンスを開発する。
論文 参考訳(メタデータ) (2023-01-29T03:08:47Z) - Compound Batch Normalization for Long-tailed Image Classification [77.42829178064807]
本稿では,ガウス混合に基づく複合バッチ正規化法を提案する。
機能空間をより包括的にモデル化し、ヘッドクラスの優位性を減らすことができる。
提案手法は,画像分類における既存の手法よりも優れている。
論文 参考訳(メタデータ) (2022-12-02T07:31:39Z) - Bias Mimicking: A Simple Sampling Approach for Bias Mitigation [57.17709477668213]
本稿では,新しいクラス条件サンプリング手法であるBias Mimickingを紹介する。
Bias Mimickingは、4つのベンチマークで3%の精度でサンプリングの精度を向上する。
論文 参考訳(メタデータ) (2022-09-30T17:33:00Z) - Stop Oversampling for Class Imbalance Learning: A Critical Review [0.9208007322096533]
オーバーサンプリングは、不均衡なデータセットから学ぶことの難しさを克服するために採用されている。
オーバーサンプリングアプローチの根本的な難しさは、実生個体数を考えると、合成標本が真のマイノリティクラスに属していないことである。
我々は,多数のサンプルを隠蔽し,オーバーサンプリングプロセスによって生成されたものと比較し,新しいオーバーサンプリング評価システムを開発した。
論文 参考訳(メタデータ) (2022-02-04T15:11:11Z) - GMOTE: Gaussian based minority oversampling technique for imbalanced
classification adapting tail probability of outliers [0.0]
データレベルのアプローチは、主にオーバーサンプリングメソッドを使用して問題を解決します。例えば、合成マイノリティオーバーサンプリング技術(SMOTE)です。
本稿では,不均衡データセットに対する統計的観点からガウス型マイノリティオーバーサンプリング手法(gmote)を提案する。
GMOTEが分類および回帰木(CART)またはサポートベクター機械(SVM)と結合されるとき、それはよりよい正確さおよびF1スコアを示します。
論文 参考訳(メタデータ) (2021-05-09T07:04:37Z) - A Novel Adaptive Minority Oversampling Technique for Improved
Classification in Data Imbalanced Scenarios [23.257891827728827]
異なるクラスに属するトレーニングサンプルの割合の不均衡は、しばしば従来の分類器の性能低下を引き起こす。
不均衡なデータに対処する新しい3ステップ手法を提案する。
論文 参考訳(メタデータ) (2021-03-24T09:58:02Z) - Conditional Wasserstein GAN-based Oversampling of Tabular Data for
Imbalanced Learning [10.051309746913512]
本稿では,条件付きWasserstein GANに基づくオーバーサンプリング手法を提案する。
実世界の7つのデータセット上で,標準的なオーバーサンプリング手法と不均衡なベースラインに対して,本手法をベンチマークした。
論文 参考訳(メタデータ) (2020-08-20T20:33:56Z) - Minority Class Oversampling for Tabular Data with Deep Generative Models [4.976007156860967]
オーバーサンプリングによる非バランスな分類タスクの性能向上を図るために, 深層生成モデルを用いて現実的なサンプルを提供する能力について検討した。
実験の結果,サンプリング手法は品質に影響を与えないが,実行環境は様々であることがわかった。
また、性能指標の点でも改善が重要であるが、絶対的な点では小さな点がしばしば見られる。
論文 参考訳(メタデータ) (2020-05-07T21:35:57Z) - M2m: Imbalanced Classification via Major-to-minor Translation [79.09018382489506]
ほとんどの実世界のシナリオでは、ラベル付きトレーニングデータセットは非常にクラス不均衡であり、ディープニューラルネットワークは、バランスの取れたテスト基準への一般化に苦しむ。
本稿では,より頻度の低いクラスを,より頻度の低いクラスからのサンプルを翻訳することによって,この問題を緩和する新しい方法を提案する。
提案手法は,従来の再サンプリング法や再重み付け法と比較して,マイノリティクラスの一般化を著しく改善することを示す。
論文 参考訳(メタデータ) (2020-04-01T13:21:17Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。