論文の概要: Unsupervised Unlearning of Concept Drift with Autoencoders
- arxiv url: http://arxiv.org/abs/2211.12989v2
- Date: Tue, 19 Sep 2023 11:23:32 GMT
- ステータス: 処理完了
- システム内更新日: 2023-09-20 20:32:35.798825
- Title: Unsupervised Unlearning of Concept Drift with Autoencoders
- Title(参考訳): オートエンコーダによる概念ドリフトの教師なし学習
- Authors: Andr\'e Artelt, Kleanthis Malialis, Christos Panayiotou, Marios
Polycarpou, Barbara Hammer
- Abstract要約: コンセプトドリフトは、将来のサンプルのデータストリームに影響を与えるデータ分散の変化を指す。
本稿では,世界レベルでの教師なしおよびモデルに依存しないドリフト適応手法を提案する。
- 参考スコア(独自算出の注目度): 5.41354952642957
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Concept drift refers to a change in the data distribution affecting the data
stream of future samples. Consequently, learning models operating on the data
stream might become obsolete, and need costly and difficult adjustments such as
retraining or adaptation. Existing methods usually implement a local concept
drift adaptation scheme, where either incremental learning of the models is
used, or the models are completely retrained when a drift detection mechanism
triggers an alarm. This paper proposes an alternative approach in which an
unsupervised and model-agnostic concept drift adaptation method at the global
level is introduced, based on autoencoders. Specifically, the proposed method
aims to ``unlearn'' the concept drift without having to retrain or adapt any of
the learning models operating on the data. An extensive experimental evaluation
is conducted in two application domains. We consider a realistic water
distribution network with more than 30 models in-place, from which we create
200 simulated data sets / scenarios. We further consider an image-related task
to demonstrate the effectiveness of our method.
- Abstract(参考訳): コンセプトドリフトは、将来のサンプルのデータストリームに影響を与えるデータ分散の変化を指す。
その結果、データストリーム上で動作する学習モデルは時代遅れになり、再トレーニングや適応のようなコストがかかり難しい調整が必要になる。
既存の手法では、モデルのインクリメンタルな学習や、ドリフト検出機構がアラームを起動したときにモデルが完全に再訓練されるローカルコンセプトドリフト適応スキームを実装している。
本稿では,オートエンコーダをベースとした,世界レベルでの教師なしおよびモデルに依存しないドリフト適応手法を提案する。
具体的には,データ上で動作する学習モデルの再トレーニングや適応を行うことなく,概念ドリフトの‘unlearn’を目標とする。
2つのアプリケーション領域で広範な実験的評価を行う。
我々は30以上のモデルが配置されている現実的な配水ネットワークを検討し、そこから200のシミュレーションデータセット/シナリオを作成する。
さらに,本手法の有効性を示すため,画像関連課題についても検討する。
関連論文リスト
- Non-Stationary Learning of Neural Networks with Automatic Soft Parameter Reset [98.52916361979503]
非定常性を自動的にモデル化し適応する新しい学習手法を導入する。
非定常的・非政治的強化学習環境において,本手法が有効であることを示す。
論文 参考訳(メタデータ) (2024-11-06T16:32:40Z) - Distilled Datamodel with Reverse Gradient Matching [74.75248610868685]
オフライントレーニングとオンライン評価段階を含む,データ影響評価のための効率的なフレームワークを提案する。
提案手法は, 直接再学習法と比較して, プロセスの大幅な高速化を図りながら, 同等のモデル行動評価を実現する。
論文 参考訳(メタデータ) (2024-04-22T09:16:14Z) - Liquid Neural Network-based Adaptive Learning vs. Incremental Learning for Link Load Prediction amid Concept Drift due to Network Failures [37.66676003679306]
概念の漂流に適応することは、機械学習において難しい課題である。
通信ネットワークでは、障害イベントの後に交通予報を行う際にこのような問題が生じる。
本稿では,適応学習アルゴリズム,すなわち,データパターンの急激な変化を,再学習を必要とせずに自己適応できる手法を提案する。
論文 参考訳(メタデータ) (2024-04-08T08:47:46Z) - MORPH: Towards Automated Concept Drift Adaptation for Malware Detection [0.7499722271664147]
コンセプトドリフトはマルウェア検出にとって重要な課題である。
自己学習は、コンセプトドリフトを緩和するための有望なアプローチとして現れています。
擬似ラベルに基づく効果的なドリフト適応法であるMORPHを提案する。
論文 参考訳(メタデータ) (2024-01-23T14:25:43Z) - Unsupervised Discovery of Interpretable Directions in h-space of
Pre-trained Diffusion Models [63.1637853118899]
本稿では,事前学習した拡散モデルのh空間における解釈可能な方向を特定するための,教師なしおよび学習に基づく最初の手法を提案する。
我々は、事前訓練された拡散モデルのh-スペースで動作するシフト制御モジュールを用いて、サンプルをシフトしたバージョンに操作する。
それらを共同で最適化することで、モデルは自然に絡み合った、解釈可能な方向を発見する。
論文 参考訳(メタデータ) (2023-10-15T18:44:30Z) - Unsupervised Domain Adaptation for Self-Driving from Past Traversal
Features [69.47588461101925]
本研究では,新しい運転環境に3次元物体検出器を適応させる手法を提案する。
提案手法は,空間的量子化履歴特徴を用いたLiDARに基づく検出モデルを強化する。
実世界のデータセットの実験では、大幅な改善が示されている。
論文 参考訳(メタデータ) (2023-09-21T15:00:31Z) - Enhancing Multiple Reliability Measures via Nuisance-extended
Information Bottleneck [77.37409441129995]
トレーニングデータに制限がある現実的なシナリオでは、データ内の多くの予測信号は、データ取得のバイアスからより多く得る。
我々は,相互情報制約の下で,より広い範囲の摂動をカバーできる敵の脅威モデルを考える。
そこで本研究では,その目的を実現するためのオートエンコーダベーストレーニングと,提案したハイブリッド識別世代学習を促進するための実用的なエンコーダ設計を提案する。
論文 参考訳(メタデータ) (2023-03-24T16:03:21Z) - Autoregressive based Drift Detection Method [0.0]
我々はADDMと呼ばれる自己回帰モデルに基づく新しい概念ドリフト検出手法を提案する。
以上の結果から,新しいドリフト検出法は最先端ドリフト検出法よりも優れていることがわかった。
論文 参考訳(メタデータ) (2022-03-09T14:36:16Z) - Employing chunk size adaptation to overcome concept drift [2.277447144331876]
ブロックベースのデータストリーム分類アルゴリズムに適応可能な新しいチャンク適応復元フレームワークを提案する。
提案アルゴリズムは,概念ドリフト検出時のデータチャンクサイズを調整し,その変更が使用済みモデルの予測性能に与える影響を最小限に抑える。
論文 参考訳(メタデータ) (2021-10-25T12:36:22Z) - Asynchronous Federated Learning for Sensor Data with Concept Drift [17.390098048134195]
フェデレートラーニング(FL)では、複数の分散デバイスが共有モデルを共同でトレーニングする。
以前のFLアプローチのほとんどは、トレーニングプロセス中にデバイス上のデータが固定され、静止していると仮定している。
コンセプトドリフトは、既存のデータと今後のデータの間に矛盾があるため、学習プロセスを複雑にします。
本稿では,ローカルデバイス上でのドリフトを検知し,対処するための新しいアプローチであるFedConDを提案する。
論文 参考訳(メタデータ) (2021-09-01T02:06:42Z) - Learning Diverse Representations for Fast Adaptation to Distribution
Shift [78.83747601814669]
本稿では,複数のモデルを学習する手法を提案する。
分散シフトへの迅速な適応を促進するフレームワークの能力を実証する。
論文 参考訳(メタデータ) (2020-06-12T12:23:50Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。