論文の概要: Task-Sensitive Concept Drift Detector with Metric Learning
- arxiv url: http://arxiv.org/abs/2108.06980v1
- Date: Mon, 16 Aug 2021 09:10:52 GMT
- ステータス: 処理完了
- システム内更新日: 2021-08-17 21:00:30.053651
- Title: Task-Sensitive Concept Drift Detector with Metric Learning
- Title(参考訳): メトリック学習を用いたタスク感性概念ドリフト検出器
- Authors: Andrea Castellani, Sebastian Schmitt, Barbara Hammer
- Abstract要約: 提案手法は, 実測時に真のラベルにアクセスすることなくドリフトを検出することのできる, タスク依存型ドリフト検出フレームワークである。
ドリフトが分類性能に影響を与える実際のドリフトを検出し、仮想ドリフトを適切に無視することができる。
本稿では, 検出精度, 偽陽性率, 検出遅延の標準指標を1つの値に蓄積する新しい指標を用いて, 提案手法の性能評価を行う。
- 参考スコア(独自算出の注目度): 7.706795195017394
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Detecting drifts in data is essential for machine learning applications, as
changes in the statistics of processed data typically has a profound influence
on the performance of trained models. Most of the available drift detection
methods require access to true labels during inference time. In a real-world
scenario, true labels usually available only during model training. In this
work, we propose a novel task-sensitive drift detection framework, which is
able to detect drifts without access to true labels during inference. It
utilizes metric learning of a constrained low-dimensional embedding
representation of the input data, which is best suited for the classification
task. It is able to detect real drift, where the drift affects the
classification performance, while it properly ignores virtual drift, where the
classification performance is not affected by the drift. In the proposed
framework, the actual method to detect a change in the statistics of incoming
data samples can be chosen freely. We also propose the two change detection
methods, which are based on the exponential moving average and a modified
$z$-score, respectively. We evaluate the performance of the proposed framework
with a novel metric, which accumulates the standard metrics of detection
accuracy, false positive rate and detection delay into one value. Experimental
evaluation on nine benchmarks datasets, with different types of drift,
demonstrates that the proposed framework can reliably detect drifts, and
outperforms state-of-the-art unsupervised drift detection approaches.
- Abstract(参考訳): データ内のドリフトを検出することは機械学習アプリケーションにとって不可欠であり、処理されたデータの統計の変化は、通常、訓練されたモデルの性能に大きな影響を及ぼす。
利用可能なドリフト検出手法のほとんどは、推論時間中に真のラベルにアクセスする必要がある。
現実のシナリオでは、真のラベルはモデルトレーニング時にのみ利用できる。
そこで本研究では,推論中に真のラベルにアクセスすることなくドリフトを検出するタスクセンシティブドリフト検出フレームワークを提案する。
入力データの制約付き低次元埋め込み表現のメトリック学習を利用しており、分類タスクに最適である。
ドリフトが分類性能に影響する実際のドリフトを検出することができるが、ドリフトによって分類性能に影響されない仮想ドリフトを適切に無視することができる。
提案フレームワークでは,受信したデータサンプルの統計値の変化を検出するための実際の手法を自由に選択できる。
また,指数的移動平均と修正された$z$-scoreに基づく2つの変化検出法を提案する。
本稿では, 検出精度, 偽陽性率, 検出遅延の標準指標を1つの値に蓄積する新しい指標を用いて, 提案手法の性能評価を行う。
9つのベンチマークデータセットの異なる種類のドリフトによる実験的評価は、提案されたフレームワークがドリフトを確実に検出でき、最先端のドリフト検出アプローチよりも優れていることを示している。
関連論文リスト
- A Neighbor-Searching Discrepancy-based Drift Detection Scheme for Learning Evolving Data [40.00357483768265]
本研究では,Nighbor-Searching Discrepancyに基づく新しい概念ドリフト検出手法を提案する。
提案手法は,仮想ドリフトを無視しながら,実概念ドリフトを高精度に検出することができる。
また、ある階級の侵略や撤退を特定することで、分類境界の変化の方向を示すこともできる。
論文 参考訳(メタデータ) (2024-05-23T04:03:36Z) - Drift Detection: Introducing Gaussian Split Detector [1.9430846345184412]
本稿では,バッチモードで動作する新しいドリフト検出器であるGaussian Split Detector (GSD)を紹介する。
GSDは、データが正規分布に従うときに機能し、決定境界の変化を監視するためにガウス混合モデルを使用するように設計されている。
我々の検出器は、実際のドリフトの検出や、誤報を避けるための鍵となる仮想ドリフトの無視において、技術の現状よりも優れていることを示す。
論文 参考訳(メタデータ) (2024-05-14T14:15:31Z) - Unsupervised Domain Adaptation for Self-Driving from Past Traversal
Features [69.47588461101925]
本研究では,新しい運転環境に3次元物体検出器を適応させる手法を提案する。
提案手法は,空間的量子化履歴特徴を用いたLiDARに基づく検出モデルを強化する。
実世界のデータセットの実験では、大幅な改善が示されている。
論文 参考訳(メタデータ) (2023-09-21T15:00:31Z) - CADM: Confusion Model-based Detection Method for Real-drift in Chunk
Data Stream [3.0885191226198785]
コンセプトドリフト検出は、健康モニタリングや故障診断といった現実の多くの応用において重要であることから、かなりの注目を集めている。
本稿では,概念的混乱に基づく限定アノテーションを用いて,チャンクデータストリーム内のリアルタイムドリフトを検出する手法を提案する。
論文 参考訳(メタデータ) (2023-03-25T08:59:27Z) - Leveraging Unlabeled Data to Predict Out-of-Distribution Performance [63.740181251997306]
実世界の機械学習デプロイメントは、ソース(トレーニング)とターゲット(テスト)ディストリビューションのミスマッチによって特徴づけられる。
本研究では,ラベル付きソースデータとラベルなしターゲットデータのみを用いて,対象領域の精度を予測する手法を検討する。
本稿では,モデルの信頼度をしきい値として学習し,精度をラベルなし例のごく一部として予測する実践的手法である平均閾値保持信頼度(ATC)を提案する。
論文 参考訳(メタデータ) (2022-01-11T23:01:12Z) - Attentive Prototypes for Source-free Unsupervised Domain Adaptive 3D
Object Detection [85.11649974840758]
3Dオブジェクト検出ネットワークは、トレーニングされたデータに対してバイアスを受ける傾向がある。
そこで本研究では,ライダーを用いた3次元物体検出器のソースレス・教師なし領域適応のための単一フレーム手法を提案する。
論文 参考訳(メタデータ) (2021-11-30T18:42:42Z) - Self-supervised Pretraining with Classification Labels for Temporal
Activity Detection [54.366236719520565]
時間的アクティビティ検出は、1フレーム当たりのアクティビティクラスを予測することを目的としている。
検出に必要なフレームレベルのアノテーションが高価なため、検出データセットの規模は限られている。
本研究では,分類ラベルを利用した自己教師付き事前学習手法を提案する。
論文 参考訳(メタデータ) (2021-11-26T18:59:28Z) - Bandit Quickest Changepoint Detection [55.855465482260165]
すべてのセンサの継続的な監視は、リソースの制約のためにコストがかかる可能性がある。
有限パラメータ化確率分布の一般クラスに対する検出遅延に基づく情報理論の下界を導出する。
本稿では,異なる検知オプションの探索と質問行動の活用をシームレスに両立させる,計算効率のよいオンラインセンシング手法を提案する。
論文 参考訳(メタデータ) (2021-07-22T07:25:35Z) - Detecting Concept Drift With Neural Network Model Uncertainty [0.0]
不確実ドリフト検出(UDD)は、真のラベルにアクセスすることなくドリフトを検出することができる。
入力データに基づくドリフト検出とは対照的に,現在の入力データが予測モデルの特性に与える影響を考察する。
UDDは2つの合成および10の実世界のデータセットにおいて、回帰処理と分類処理の両方において、他の最先端戦略よりも優れていることを示す。
論文 参考訳(メタデータ) (2021-07-05T08:56:36Z) - Concept Drift Detection via Equal Intensity k-means Space Partitioning [40.77597229122878]
等強度k平均空間分割(EI-kMeans)というクラスタベースのヒストグラム
3つのアルゴリズムは、グリーディセントロイドアルゴリズム、クラスタ増幅シンクアルゴリズム、ドリフト検出アルゴリズムを含む、概念ドリフト検出を実装するために開発された。
合成および実世界のデータセットの実験は、EI-kMeansの利点を示し、コンセプトドリフトを検出する効果を示す。
論文 参考訳(メタデータ) (2020-04-24T08:00:16Z) - Learning with Out-of-Distribution Data for Audio Classification [60.48251022280506]
我々は,OODインスタンスを破棄するよりも,特定のOODインスタンスを検出・復号化することで,学習に肯定的な影響を及ぼすことを示す。
提案手法は,畳み込みニューラルネットワークの性能を著しく向上させる。
論文 参考訳(メタデータ) (2020-02-11T21:08:06Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。