論文の概要: Rare Yet Popular: Evidence and Implications from Labeled Datasets for
Network Anomaly Detection
- arxiv url: http://arxiv.org/abs/2211.10129v1
- Date: Fri, 18 Nov 2022 10:14:03 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-21 14:34:44.180254
- Title: Rare Yet Popular: Evidence and Implications from Labeled Datasets for
Network Anomaly Detection
- Title(参考訳): まれだが人気がある:ネットワーク異常検出のためのラベル付きデータセットからの証拠と意味
- Authors: Jose Manuel Navarro, Alexis Huet and Dario Rossi
- Abstract要約: 本稿では,ネットワーク環境における異常検出のための,公開・非公開の真理を体系的に分析する。
解析の結果, 異常は時間的に稀な事象であるが, 空間的特徴から, 異常が比較的多いことが明らかとなった。
- 参考スコア(独自算出の注目度): 9.717823994163277
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Anomaly detection research works generally propose algorithms or end-to-end
systems that are designed to automatically discover outliers in a dataset or a
stream. While literature abounds concerning algorithms or the definition of
metrics for better evaluation, the quality of the ground truth against which
they are evaluated is seldom questioned. In this paper, we present a systematic
analysis of available public (and additionally our private) ground truth for
anomaly detection in the context of network environments, where data is
intrinsically temporal, multivariate and, in particular, exhibits spatial
properties, which, to the best of our knowledge, we are the first to explore.
Our analysis reveals that, while anomalies are, by definition, temporally rare
events, their spatial characterization clearly shows some type of anomalies are
significantly more popular than others. We find that simple clustering can
reduce the need for human labeling by a factor of 2x-10x, that we are first to
quantitatively analyze in the wild.
- Abstract(参考訳): 異常検出研究は一般的に、データセットやストリーム内の異常値を自動的に検出するように設計されたアルゴリズムやエンドツーエンドシステムを提案する。
より良い評価のためのアルゴリズムやメトリクスの定義に関する文献は多いが、それらが評価される根拠となる真実の品質は、ほとんど疑問視されない。
本稿では,ネットワーク環境の文脈において,データが本質的に時間的・多変量的であり,特に空間的特性を呈し,私たちの知る限りでは,最初に探索を行うネットワーク環境において,利用可能な公開的(および私たちのプライベートな)基底真理を体系的に分析する。
解析の結果, 異常は時間的に稀な事象であるが, 空間的特徴から, 異常が比較的多いことが明らかとなった。
簡単なクラスタリングによって2x-10xの要素で人間のラベリングの必要性を減らし、自然界で最初に定量的に分析できることがわかりました。
関連論文リスト
- Anomaly Detection by Context Contrasting [57.695202846009714]
異常検出は、標準から逸脱するサンプルを特定することに焦点を当てる。
近年の自己教師型学習の進歩は、この点において大きな可能性を秘めている。
我々はコンテキスト拡張を通じて学習するCon$を提案する。
論文 参考訳(メタデータ) (2024-05-29T07:59:06Z) - Anomaly component analysis [3.046315755726937]
本稿では,データ深度をスコアとして,異常観測を探索的に分析するための新しい統計ツールを提案する。
異常成分分析(英: Anomaly component analysis、略称: ACA)は、異常を最もよく視覚化し説明する低次元データ表現を探索する手法である。
論文 参考訳(メタデータ) (2023-12-26T17:57:46Z) - Video Anomaly Detection via Spatio-Temporal Pseudo-Anomaly Generation : A Unified Approach [49.995833831087175]
本研究は,画像のマスキング領域にペンキを塗布することにより,汎用的な映像時間PAを生成する手法を提案する。
さらに,OCC設定下での現実世界の異常を検出するための単純な統合フレームワークを提案する。
提案手法は,OCC設定下での既存のPAs生成および再構築手法と同等に動作する。
論文 参考訳(メタデータ) (2023-11-27T13:14:06Z) - Precursor-of-Anomaly Detection for Irregular Time Series [31.73234935455713]
本稿では,新しいタイプの異常検出法であるPrecursor-of-Anomaly(PoA)について述べる。
両問題を同時に解くために,ニューラルネットワークとマルチタスク学習アルゴリズムを提案する。
論文 参考訳(メタデータ) (2023-06-27T14:10:09Z) - A Taxonomy of Anomalies in Log Data [0.09558392439655014]
異常の一般的な分類法は、すでに存在するが、ログデータに特に適用されていない。
本稿では,異なる種類のログデータ異常に対する分類法を提案し,ラベル付きデータセットにおけるそのような異常を分析する方法を提案する。
以上の結果から,最も一般的な異常型が予測し易いことが示唆された。
論文 参考訳(メタデータ) (2021-11-26T12:23:06Z) - Explainable Deep Few-shot Anomaly Detection with Deviation Networks [123.46611927225963]
本稿では,弱い教師付き異常検出フレームワークを導入し,検出モデルを訓練する。
提案手法は,ラベル付き異常と事前確率を活用することにより,識別正規性を学習する。
我々のモデルはサンプル効率が高く頑健であり、クローズドセットとオープンセットの両方の設定において最先端の競合手法よりもはるかに優れている。
論文 参考訳(メタデータ) (2021-08-01T14:33:17Z) - Algorithmic Frameworks for the Detection of High Density Anomalies [0.0]
高密度異常(英: high-density anomalies)は、データ空間の最も正常な領域に位置する不確定なケースである。
本研究では、教師なし検出のための非パラメトリックアルゴリズムフレームワークをいくつか導入する。
論文 参考訳(メタデータ) (2020-10-09T17:48:02Z) - TadGAN: Time Series Anomaly Detection Using Generative Adversarial
Networks [73.01104041298031]
TadGANは、GAN(Generative Adversarial Networks)上に構築された教師なしの異常検出手法である。
時系列の時間相関を捉えるために,ジェネレータと批評家のベースモデルとしてLSTMリカレントニューラルネットワークを用いる。
提案手法の性能と一般化性を示すため,いくつかの異常スコアリング手法を検証し,最も適した手法を報告する。
論文 参考訳(メタデータ) (2020-09-16T15:52:04Z) - Toward Deep Supervised Anomaly Detection: Reinforcement Learning from
Partially Labeled Anomaly Data [150.9270911031327]
本稿では,一部のラベル付き異常事例と大規模ラベルなしデータセットを用いた異常検出の問題点について考察する。
既存の関連手法は、通常、一連の異常にまたがらない限られた異常例にのみ適合するか、ラベルのないデータから教師なしの学習を進めるかのいずれかである。
そこで本研究では,ラベル付きおよびラベルなし両方の異常の検出をエンドツーエンドに最適化する,深層強化学習に基づくアプローチを提案する。
論文 参考訳(メタデータ) (2020-09-15T03:05:39Z) - Deep Weakly-supervised Anomaly Detection [118.55172352231381]
ペアワイズ関係予測ネットワーク(PReNet)は、ペアワイズ関係の特徴と異常スコアを学習する。
PReNetは、学習したペアの異常パターンに適合する見知らぬ異常を検出できる。
12の実世界のデータセットに対する実証的な結果から、PReNetは目に見えない異常や異常を検知する9つの競合する手法を著しく上回っている。
論文 参考訳(メタデータ) (2019-10-30T00:40:25Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。