論文の概要: From Concept Drift to Model Degradation: An Overview on
Performance-Aware Drift Detectors
- arxiv url: http://arxiv.org/abs/2203.11070v1
- Date: Mon, 21 Mar 2022 15:48:13 GMT
- ステータス: 処理完了
- システム内更新日: 2022-03-22 15:05:10.941719
- Title: From Concept Drift to Model Degradation: An Overview on
Performance-Aware Drift Detectors
- Title(参考訳): コンセプトドリフトからモデル劣化へ:性能を考慮したドリフト検出器の概要
- Authors: Firas Bayram, Bestoun S. Ahmed, Andreas Kassler
- Abstract要約: 予測機械学習モデルがトレーニングされたシステムの変化は、システムのライフサイクルにおけるパフォーマンス低下につながる可能性がある。
文献では、同じ種類のコンセプトドリフトと、様々な種類の同じ用語を指すために、異なる用語が用いられてきた。
この統一項の欠如は、異なる概念のドリフト変種を区別する上で混乱を引き起こす。
- 参考スコア(独自算出の注目度): 1.757501664210825
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: The dynamicity of real-world systems poses a significant challenge to
deployed predictive machine learning (ML) models. Changes in the system on
which the ML model has been trained may lead to performance degradation during
the system's life cycle. Recent advances that study non-stationary environments
have mainly focused on identifying and addressing such changes caused by a
phenomenon called concept drift. Different terms have been used in the
literature to refer to the same type of concept drift and the same term for
various types. This lack of unified terminology is set out to create confusion
on distinguishing between different concept drift variants. In this paper, we
start by grouping concept drift types by their mathematical definitions and
survey the different terms used in the literature to build a consolidated
taxonomy of the field. We also review and classify performance-based concept
drift detection methods proposed in the last decade. These methods utilize the
predictive model's performance degradation to signal substantial changes in the
systems. The classification is outlined in a hierarchical diagram to provide an
orderly navigation between the methods. We present a comprehensive analysis of
the main attributes and strategies for tracking and evaluating the model's
performance in the predictive system. The paper concludes by discussing open
research challenges and possible research directions.
- Abstract(参考訳): 実世界のシステムの動的性は、予測機械学習(ML)モデルをデプロイする上で大きな課題となる。
MLモデルがトレーニングされたシステムの変更は、システムのライフサイクルにおけるパフォーマンス低下につながる可能性がある。
非定常環境の研究の最近の進歩は、概念ドリフトと呼ばれる現象によって引き起こされるそのような変化を識別し、対処することに集中している。
文献では、同じ概念ドリフトや、様々なタイプの同じ用語を指すために、異なる用語が用いられてきた。
この統一的な用語の欠如は、異なる概念ドリフト変種を区別することの混乱を生じさせる。
本稿では,概念ドリフト型を数学的定義でグループ化し,その分野の統一分類法を構築するために文献で用いられる異なる用語を調査した。
また,過去10年間に提案されている性能に基づくドリフト検出手法について検討し,分類する。
これらの手法は予測モデルの性能劣化を利用してシステムに大きな変化を示す。
分類は階層図で概説され、メソッド間の順序付けられたナビゲーションを提供する。
本稿では,予測システムにおけるモデルの性能の追跡と評価のための主な属性と戦略を包括的に分析する。
オープンな研究課題と研究の方向性について論じる。
関連論文リスト
- A Survey on All-in-One Image Restoration: Taxonomy, Evaluation and Future Trends [67.43992456058541]
画像復元(IR)とは、ノイズ、ぼかし、気象効果などの劣化を除去しながら、画像の視覚的品質を改善する過程である。
従来のIR手法は、一般的に特定の種類の劣化をターゲットとしており、複雑な歪みを伴う現実のシナリオにおいて、その効果を制限している。
オールインワン画像復元(AiOIR)パラダイムが登場し、複数の劣化タイプに順応的に対処する統一されたフレームワークを提供する。
論文 参考訳(メタデータ) (2024-10-19T11:11:09Z) - A Neighbor-Searching Discrepancy-based Drift Detection Scheme for Learning Evolving Data [40.00357483768265]
本研究では,Nighbor-Searching Discrepancyに基づく新しい概念ドリフト検出手法を提案する。
提案手法は,仮想ドリフトを無視しながら,実概念ドリフトを高精度に検出することができる。
また、ある階級の侵略や撤退を特定することで、分類境界の変化の方向を示すこともできる。
論文 参考訳(メタデータ) (2024-05-23T04:03:36Z) - Methods for Generating Drift in Text Streams [49.3179290313959]
コンセプトドリフトは、実世界のデータセットで頻繁に発生する現象であり、時間とともにデータ分布の変化に対応する。
本稿では,ラベル付きドリフトを用いたデータセット作成を容易にするための4つのテキストドリフト生成手法を提案する。
その結果、ドリフトの直後にすべてのメソッドのパフォーマンスが低下し、インクリメンタルなSVMは、以前のパフォーマンスレベルを実行し、回復するのに最も速いことを示している。
論文 参考訳(メタデータ) (2024-03-18T23:48:33Z) - A comprehensive analysis of concept drift locality in data streams [3.5897534810405403]
概念ドリフトは、進化するデータ特性への効果的なモデル適応のために検出されなければならない。
本稿では,その局所性とスケールに基づいて,概念ドリフトの新たな分類法を提案する。
我々は, 様々な難易度において, 9つの最先端ドリフト検出器の比較評価を行った。
論文 参考訳(メタデータ) (2023-11-10T20:57:43Z) - Unsupervised Unlearning of Concept Drift with Autoencoders [5.41354952642957]
コンセプトドリフトは、将来のサンプルのデータストリームに影響を与えるデータ分散の変化を指す。
本稿では,世界レベルでの教師なしおよびモデルに依存しないドリフト適応手法を提案する。
論文 参考訳(メタデータ) (2022-11-23T14:52:49Z) - MACE: An Efficient Model-Agnostic Framework for Counterfactual
Explanation [132.77005365032468]
MACE(Model-Agnostic Counterfactual Explanation)の新たな枠組みを提案する。
MACE法では, 優れた反実例を見つけるための新しいRL法と, 近接性向上のための勾配のない降下法を提案する。
公開データセットの実験は、有効性、空間性、近接性を向上して検証する。
論文 参考訳(メタデータ) (2022-05-31T04:57:06Z) - Towards Robust and Adaptive Motion Forecasting: A Causal Representation
Perspective [72.55093886515824]
本稿では,3つの潜伏変数群からなる動的過程として,運動予測の因果的形式化を導入する。
我々は、因果グラフを近似するために、不変なメカニズムやスタイルの共創者の表現を分解するモジュラーアーキテクチャを考案する。
合成および実データを用いた実験結果から,提案した3つの成分は,学習した動き表現の頑健性と再利用性を大幅に向上することが示された。
論文 参考訳(メタデータ) (2021-11-29T18:59:09Z) - Beyond Trivial Counterfactual Explanations with Diverse Valuable
Explanations [64.85696493596821]
コンピュータビジョンの応用において、生成的対実法はモデルの入力を摂動させて予測を変更する方法を示す。
本稿では,多様性強化損失を用いて制約される不連続潜在空間における摂動を学習する反事実法を提案する。
このモデルは, 従来の最先端手法と比較して, 高品質な説明を生産する成功率を向上させる。
論文 参考訳(メタデータ) (2021-03-18T12:57:34Z) - Drift Estimation with Graphical Models [0.0]
グラフィカルモデルを用いて、データの可視構造を抽出し、隠れたコンテキストの変化から推測する。
本研究は,オーストラリア電力市場における実世界データを用いた評価手法である。
論文 参考訳(メタデータ) (2021-02-02T12:24:34Z) - Switching Scheme: A Novel Approach for Handling Incremental Concept
Drift in Real-World Data Sets [0.0]
概念ドリフトは、機械学習システムの予測性能に深刻な影響を与える可能性がある。
本研究では,実世界のデータセットの文脈における概念ドリフトの効果を分析する。
本稿では,機械学習モデルの再学習と更新の2つの原則を組み合わせたスイッチング方式を提案する。
論文 参考訳(メタデータ) (2020-11-05T10:16:54Z) - FLAT: Few-Shot Learning via Autoencoding Transformation Regularizers [67.46036826589467]
本稿では,データ例のラベルを使わずに,変換の分布によって引き起こされる特徴表現の変化を学習することで,新たな正規化機構を提案する。
エンコードされた特徴レベルで変換強化されたバリエーションを検査することで、ベースカテゴリへのオーバーフィットのリスクを最小限に抑えることができる。
実験結果から,文学における現在の最先端手法よりも優れた性能を示した。
論文 参考訳(メタデータ) (2019-12-29T15:26:28Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。