論文の概要: Detecting Anomalies Through Contrast in Heterogeneous Data
- arxiv url: http://arxiv.org/abs/2104.01156v1
- Date: Fri, 2 Apr 2021 17:21:12 GMT
- ステータス: 処理完了
- システム内更新日: 2021-04-05 14:27:59.924116
- Title: Detecting Anomalies Through Contrast in Heterogeneous Data
- Title(参考訳): 異種データのコントラストによる異常検出
- Authors: Debanjan Datta, Sathappan Muthiah and Naren Ramakrishnan
- Abstract要約: 先行モデルの欠点に対処するために,コントラスト学習に基づく異種異常検出器を提案する。
我々のモデルは非対称オートエンコーダを使い、大きなarity カテゴリ変数を効果的に処理できる。
木材取引における異常検出におけるモデルの有効性を示す質的研究を行った。
- 参考スコア(独自算出の注目度): 21.56932906044264
- License: http://creativecommons.org/licenses/by-sa/4.0/
- Abstract: Detecting anomalies has been a fundamental approach in detecting potentially
fraudulent activities. Tasked with detection of illegal timber trade that
threatens ecosystems and economies and association with other illegal
activities, we formulate our problem as one of anomaly detection. Among other
challenges annotations are unavailable for our large-scale trade data with
heterogeneous features (categorical and continuous), that can assist in
building automated systems to detect fraudulent transactions. Modelling the
task as unsupervised anomaly detection, we propose a novel model Contrastive
Learning based Heterogeneous Anomaly Detector to address shortcomings of prior
models. Our model uses an asymmetric autoencoder that can effectively handle
large arity categorical variables, but avoids assumptions about structure of
data in low-dimensional latent space and is robust to changes to
hyper-parameters. The likelihood of data is approximated through an estimator
network, which is jointly trained with the autoencoder,using negative sampling.
Further the details and intuition for an effective negative sample generation
approach for heterogeneous data are outlined. We provide a qualitative study to
showcase the effectiveness of our model in detecting anomalies in timber trade.
- Abstract(参考訳): 異常検出は、潜在的に不正行為を検出するための基本的なアプローチである。
生態系や経済を脅かす違法な木材貿易の検出や、その他の違法な活動との関連を任務とし、この問題を異常検出の1つとして定式化した。
アノテーションは、不正なトランザクションを検出する自動化システムの構築を支援する、異質な機能(カテゴリと継続性)を備えた大規模な取引データでは利用できない。
タスクを教師なし異常検出としてモデル化し,先行モデルの欠点に対処するために,新しいモデルコントラスト学習に基づく異種異常検出法を提案する。
モデルでは,非対称なオートエンコーダを用いて,大きなアリティカテゴリ変数を効果的に扱えるが,低次元潜在空間におけるデータ構造に関する仮定を回避し,超パラメータの変化に頑健である。
データの可能性は、負のサンプリングを用いてオートエンコーダと共同でトレーニングされる推定ネットワークによって近似される。
さらに、異種データに対する効果的な負サンプル生成手法の詳細と直観について概説する。
木材取引における異常検出におけるモデルの有効性を示す質的研究を行った。
関連論文リスト
- Uncertainty-aware Human Mobility Modeling and Anomaly Detection [28.311683535974634]
本研究では,効率的な異常検出に向けて,人間のエージェントの移動行動のモデル化方法について検討する。
我々はGPSデータを時系列の静止点イベントとして使用し、それぞれに時間的特徴を特徴付ける。
数万のエージェントによる大規模専門家シミュレーションデータセットの実験は、我々のモデルの有効性を実証している。
論文 参考訳(メタデータ) (2024-10-02T06:57:08Z) - AnomalyDiffusion: Few-Shot Anomaly Image Generation with Diffusion Model [59.08735812631131]
製造業において異常検査が重要な役割を担っている。
既存の異常検査手法は、異常データが不足しているため、その性能に制限がある。
本稿では,新しい拡散型マイクロショット異常生成モデルであるAnomalyDiffusionを提案する。
論文 参考訳(メタデータ) (2023-12-10T05:13:40Z) - ADT: Agent-based Dynamic Thresholding for Anomaly Detection [4.356615197661274]
本稿では,エージェントベースの動的しきい値処理(ADT)フレームワークを提案する。
本研究では,自動エンコーダを用いて特徴表現を取得し,複雑な入力データに対する異常スコアを生成する。
ADTはオートエンコーダの異常スコアを利用して閾値を適応的に調整することができる。
論文 参考訳(メタデータ) (2023-12-03T19:07:30Z) - An Improved Anomaly Detection Model for Automated Inspection of Power Line Insulators [0.0]
電力系統の信頼性を確保するためには絶縁体の検査が重要である。
検査プロセスを自動化するために、ディープラーニングがますます活用されています。
本稿では,異常検出とオブジェクト検出の2段階的アプローチを提案する。
論文 参考訳(メタデータ) (2023-11-14T11:36:20Z) - How adversarial attacks can disrupt seemingly stable accurate classifiers [76.95145661711514]
敵攻撃は、入力データに不連続な修正を加えることで、非正確な学習システムの出力を劇的に変化させる。
ここでは,これは高次元入力データを扱う分類器の基本的特徴であると考えられる。
実用システムで観測される重要な振る舞いを高い確率で発生させる、単純で汎用的なフレームワークを導入する。
論文 参考訳(メタデータ) (2023-09-07T12:02:00Z) - WePaMaDM-Outlier Detection: Weighted Outlier Detection using Pattern
Approaches for Mass Data Mining [0.6754597324022876]
外乱検出は、システム障害、不正行為、およびデータ内のパターンに関する重要な情報を明らかにすることができる。
本稿では、異なる質量データマイニング領域を持つWePaMaDM-Outlier Detectionを提案する。
また, 監視, 故障検出, 傾向解析において, 異常検出技術におけるデータモデリングの重要性についても検討した。
論文 参考訳(メタデータ) (2023-06-09T07:00:00Z) - Enhancing Multiple Reliability Measures via Nuisance-extended
Information Bottleneck [77.37409441129995]
トレーニングデータに制限がある現実的なシナリオでは、データ内の多くの予測信号は、データ取得のバイアスからより多く得る。
我々は,相互情報制約の下で,より広い範囲の摂動をカバーできる敵の脅威モデルを考える。
そこで本研究では,その目的を実現するためのオートエンコーダベーストレーニングと,提案したハイブリッド識別世代学習を促進するための実用的なエンコーダ設計を提案する。
論文 参考訳(メタデータ) (2023-03-24T16:03:21Z) - An Outlier Exposure Approach to Improve Visual Anomaly Detection
Performance for Mobile Robots [76.36017224414523]
移動ロボットの視覚異常検出システム構築の問題点を考察する。
標準異常検出モデルは、非異常データのみからなる大規模なデータセットを用いて訓練される。
本研究では,これらのデータを利用してリアルNVP異常検出モデルの性能向上を図る。
論文 参考訳(メタデータ) (2022-09-20T15:18:13Z) - DAE : Discriminatory Auto-Encoder for multivariate time-series anomaly
detection in air transportation [68.8204255655161]
識別オートエンコーダ(DAE)と呼ばれる新しい異常検出モデルを提案する。
通常のLSTMベースのオートエンコーダのベースラインを使用するが、いくつかのデコーダがあり、それぞれ特定の飛行フェーズのデータを取得する。
その結果,DAEは精度と検出速度の両方で良好な結果が得られることがわかった。
論文 参考訳(メタデータ) (2021-09-08T14:07:55Z) - Out-Of-Bag Anomaly Detection [0.9449650062296822]
データ異常は、実世界のデータセットでユビキタスであり、機械学習(ML)システムに悪影響を及ぼす可能性がある。
本稿では,新しいモデルに基づく異常検出手法を提案し,その手法をアウト・オブ・バグ検出と呼ぶ。
本手法は,家庭評価のケーススタディを通じて,データ前処理のステップとして,MLシステムの精度と信頼性を向上させることができることを示す。
論文 参考訳(メタデータ) (2020-09-20T06:01:52Z) - Unsupervised Anomaly Detection with Adversarial Mirrored AutoEncoders [51.691585766702744]
本稿では,識別器のミラー化ワッサースタイン損失を利用して,よりセマンティックレベルの再構築を行う逆自動エンコーダの変種を提案する。
我々は,再建基準の代替として,異常スコアの代替尺度を提案した。
提案手法は,OOD検出ベンチマークにおける異常検出の最先端手法よりも優れている。
論文 参考訳(メタデータ) (2020-03-24T08:26:58Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。