論文の概要: AnoRand: A Semi Supervised Deep Learning Anomaly Detection Method by
Random Labeling
- arxiv url: http://arxiv.org/abs/2305.18389v1
- Date: Sun, 28 May 2023 10:53:34 GMT
- ステータス: 処理完了
- システム内更新日: 2023-05-31 21:53:56.505138
- Title: AnoRand: A Semi Supervised Deep Learning Anomaly Detection Method by
Random Labeling
- Title(参考訳): AnoRand:ランダムラベルによる半教師付きディープラーニング異常検出手法
- Authors: Mansour Zoubeirou A Mayaki and Michel Riveill
- Abstract要約: 異常検出(英: Anomaly detection)またはより一般的には異常検出(英: outliers detection)は、理論的および応用機械学習において最も人気があり、課題の1つである。
我々は、ディープラーニングアーキテクチャとランダムな合成ラベル生成を組み合わせることで、textbfAnoRandと呼ばれる新しい半教師付き異常検出手法を提案する。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Anomaly detection or more generally outliers detection is one of the most
popular and challenging subject in theoretical and applied machine learning.
The main challenge is that in general we have access to very few labeled data
or no labels at all. In this paper, we present a new semi-supervised anomaly
detection method called \textbf{AnoRand} by combining a deep learning
architecture with random synthetic label generation. The proposed architecture
has two building blocks: (1) a noise detection (ND) block composed of feed
forward ferceptron and (2) an autoencoder (AE) block. The main idea of this new
architecture is to learn one class (e.g. the majority class in case of anomaly
detection) as well as possible by taking advantage of the ability of auto
encoders to represent data in a latent space and the ability of Feed Forward
Perceptron (FFP) to learn one class when the data is highly imbalanced. First,
we create synthetic anomalies by randomly disturbing (add noise) few samples
(e.g. 2\%) from the training set. Second, we use the normal and the synthetic
samples as input to our model. We compared the performance of the proposed
method to 17 state-of-the-art unsupervised anomaly detection method on
synthetic datasets and 57 real-world datasets. Our results show that this new
method generally outperforms most of the state-of-the-art methods and has the
best performance (AUC ROC and AUC PR) on the vast majority of reference
datasets. We also tested our method in a supervised way by using the actual
labels to train the model. The results show that it has very good performance
compared to most of state-of-the-art supervised algorithms.
- Abstract(参考訳): 異常検出(英: Anomaly detection)またはより一般的には異常検出(英: outliers detection)は、理論的および応用機械学習において最も一般的で困難な課題の一つである。
最大の課題は、一般的にラベル付きデータやラベルがまったくないものはほとんどないことです。
本稿では,深層学習アーキテクチャとランダムな合成ラベル生成を組み合わせることで,‘textbf{AnoRand}’と呼ばれる半教師付き異常検出手法を提案する。
提案アーキテクチャは,(1)フィードフォワードフェルセプトロンからなるノイズ検出(ND)ブロックと(2)オートエンコーダ(AE)ブロックの2つの構成ブロックを有する。
この新しいアーキテクチャの主な考え方は、1つのクラス(例えば、異常検出の場合の多数クラス)を学習することであり、潜在空間でデータを表現できるオートエンコーダの能力と、データが高度に不均衡な場合に1つのクラスを学ぶためのフィードフォワードパーセプトロン(ffp)の能力を活用することである。
まず、トレーニングセットから少数のサンプル(例えば2\%)をランダムに乱す(ノイズを加える)ことにより、合成異常を作成する。
第2に, モデルへの入力として, 正常試料と合成試料を用いる。
提案手法の性能を,合成データセットと57実世界のデータセットの17の非教師なし異常検出法と比較した。
提案手法は一般に最先端の手法よりも優れており,ほとんどの参照データセット上で最高の性能(AUC ROCとAUC PR)を有することを示す。
また、実際のラベルを使ってモデルをトレーニングすることで、教師ありの方法で手法をテストした。
その結果、最先端の教師付きアルゴリズムと比較して非常に優れた性能を示した。
関連論文リスト
- SoftPatch: Unsupervised Anomaly Detection with Noisy Data [67.38948127630644]
本稿では,画像センサ異常検出におけるラベルレベルのノイズを初めて考察する。
本稿では,メモリベースの非教師付きAD手法であるSoftPatchを提案する。
既存の手法と比較して、SoftPatchは通常のデータの強力なモデリング能力を維持し、コアセットにおける過信問題を軽減する。
論文 参考訳(メタデータ) (2024-03-21T08:49:34Z) - ROG$_{PL}$: Robust Open-Set Graph Learning via Region-Based Prototype
Learning [52.60434474638983]
本稿では,複雑な雑音グラフデータに対する堅牢なオープンセット学習を実現するために,ROG$_PL$という統一フレームワークを提案する。
このフレームワークは2つのモジュール、すなわちラベルの伝搬による認知と、リージョンによるオープンセットのプロトタイプ学習で構成されている。
我々の知る限り、ROG$_PL$は複雑なノイズを持つグラフデータに対して、最初の堅牢なオープンセットノード分類法である。
論文 参考訳(メタデータ) (2024-02-28T17:25:06Z) - CL-Flow:Strengthening the Normalizing Flows by Contrastive Learning for
Better Anomaly Detection [1.951082473090397]
コントラスト学習と2D-Flowを組み合わせた自己教師付き異常検出手法を提案する。
本手法は,主流の教師なし手法と比較して,検出精度が向上し,モデルパラメータが減少し,推論速度が向上することを示す。
BTADデータセットでは,MVTecADデータセットでは画像レベルのAUROCが99.6%,BTADデータセットでは画像レベルのAUROCが96.8%であった。
論文 参考訳(メタデータ) (2023-11-12T10:07:03Z) - A Discrepancy Aware Framework for Robust Anomaly Detection [51.710249807397695]
本稿では,DAF(Disdisrepancy Aware Framework)を提案する。
本手法は,デコーダの欠陥同定に外見に依存しないキューを利用して,その合成外観への依存を緩和する。
単純な合成戦略の下では,既存の手法を大きなマージンで上回り,また,最先端のローカライゼーション性能も達成している。
論文 参考訳(メタデータ) (2023-10-11T15:21:40Z) - Unsupervised Anomaly Detection via Nonlinear Manifold Learning [0.0]
異常は、残りのデータから著しく逸脱するサンプルであり、その検出は機械学習モデルを構築する上で大きな役割を果たす。
非線形多様体学習に基づく頑健で効率的かつ解釈可能な手法を導入し,教師なし設定における異常を検出する。
論文 参考訳(メタデータ) (2023-06-15T18:48:10Z) - Learning with Neighbor Consistency for Noisy Labels [69.83857578836769]
特徴空間におけるトレーニング例間の類似性を利用した雑音ラベルから学習する手法を提案する。
合成(CIFAR-10, CIFAR-100)とリアル(mini-WebVision, Clothing1M, mini-ImageNet-Red)の両方のノイズを評価するデータセットの評価を行った。
論文 参考訳(メタデータ) (2022-02-04T15:46:27Z) - A Novel Resampling Technique for Imbalanced Dataset Optimization [1.0323063834827415]
まれなイベントの分類は、詐欺取引、マルウェアトラフィック分析、ネットワーク侵入検出など、多くのドメインで一般的な問題です。
我々は,クラス不均衡問題に対処する2種類の1-Nearest Neighbour (G1Nos)オーバーサンプリングアルゴリズムを開発した。
論文 参考訳(メタデータ) (2020-12-30T17:17:08Z) - MOCCA: Multi-Layer One-Class ClassificAtion for Anomaly Detection [16.914663209964697]
我々は,Multi-Layer One-Class Classification (MOCCA) と呼ばれる異常検出問題に対するディープラーニングアプローチを提案する。
異なる深さで抽出された情報を利用して異常なデータインスタンスを検出することで、ディープニューラルネットワークのピースワイズ的性質を明示的に活用します。
本稿では,本手法が文献で利用可能な最先端手法と比較して優れた性能を示す。
論文 参考訳(メタデータ) (2020-12-09T08:32:56Z) - Self-Attentive Classification-Based Anomaly Detection in Unstructured
Logs [59.04636530383049]
ログ表現を学習するための分類法であるLogsyを提案する。
従来の方法と比較して,F1スコアの平均0.25の改善を示す。
論文 参考訳(メタデータ) (2020-08-21T07:26:55Z) - Unsupervised Anomaly Detection with Adversarial Mirrored AutoEncoders [51.691585766702744]
本稿では,識別器のミラー化ワッサースタイン損失を利用して,よりセマンティックレベルの再構築を行う逆自動エンコーダの変種を提案する。
我々は,再建基準の代替として,異常スコアの代替尺度を提案した。
提案手法は,OOD検出ベンチマークにおける異常検出の最先端手法よりも優れている。
論文 参考訳(メタデータ) (2020-03-24T08:26:58Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。