論文の概要: Anomaly Detection through Unsupervised Federated Learning
- arxiv url: http://arxiv.org/abs/2209.04184v1
- Date: Fri, 9 Sep 2022 08:45:47 GMT
- ステータス: 処理完了
- システム内更新日: 2022-09-12 13:00:27.818465
- Title: Anomaly Detection through Unsupervised Federated Learning
- Title(参考訳): 教師なしフェデレーション学習による異常検出
- Authors: Mirko Nardi, Lorenzo Valerio, Andrea Passarella
- Abstract要約: フェデレートラーニングは、分散リソースを活用する上で最も有望なパラダイムの1つであることが証明されています。
本稿では,前処理フェーズを通じて,クライアントをコミュニティにグループ化する手法を提案する。
結果の異常検出モデルは共有され、同じコミュニティのクライアント内の異常を検出するために使用される。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Federated learning (FL) is proving to be one of the most promising paradigms
for leveraging distributed resources, enabling a set of clients to
collaboratively train a machine learning model while keeping the data
decentralized. The explosive growth of interest in the topic has led to rapid
advancements in several core aspects like communication efficiency, handling
non-IID data, privacy, and security capabilities. However, the majority of FL
works only deal with supervised tasks, assuming that clients' training sets are
labeled. To leverage the enormous unlabeled data on distributed edge devices,
in this paper, we aim to extend the FL paradigm to unsupervised tasks by
addressing the problem of anomaly detection in decentralized settings. In
particular, we propose a novel method in which, through a preprocessing phase,
clients are grouped into communities, each having similar majority (i.e.,
inlier) patterns. Subsequently, each community of clients trains the same
anomaly detection model (i.e., autoencoders) in a federated fashion. The
resulting model is then shared and used to detect anomalies within the clients
of the same community that joined the corresponding federated process.
Experiments show that our method is robust, and it can detect communities
consistent with the ideal partitioning in which groups of clients having the
same inlier patterns are known. Furthermore, the performance is significantly
better than those in which clients train models exclusively on local data and
comparable with federated models of ideal communities' partition.
- Abstract(参考訳): 分散学習(federated learning, fl)は、分散リソースを活用する上で、最も有望なパラダイムのひとつであることが証明されている。
このトピックに対する関心の爆発的な増加は、通信効率、非IIDデータ処理、プライバシ、セキュリティ機能など、いくつかの中核的な面で急速に進歩しました。
しかしながら、flの作業の大部分は、クライアントのトレーニングセットがラベル付けされていることを前提として、監督されたタスクのみを扱う。
本稿では,分散エッジデバイス上の膨大なラベルなしデータを活用するため,分散環境での異常検出問題に対処することにより,教師なしタスクにflパラダイムを拡張することを目的とする。
特に,前処理フェーズを通じて,クライアントがコミュニティにグループ化され,それぞれが類似の多数派(すなわちインキュア)パターンを持つ新しい手法を提案する。
その後、各クライアントのコミュニティは、同じ異常検出モデル(オートエンコーダ)をフェデレーション形式で訓練する。
得られたモデルは共有され、対応する連合プロセスに参加した同じコミュニティのクライアント内の異常を検出するために使用される。
実験の結果,本手法はロバストであり,同じ不規則パターンを持つクライアント群が知られている理想的なパーティショニングと一致するコミュニティを検出できることがわかった。
さらに、クライアントがローカルデータのみに基づいてモデルをトレーニングし、理想的なコミュニティのパーティショニングのフェデレーションモデルに匹敵するパフォーマンスが大幅に向上している。
関連論文リスト
- FedClust: Tackling Data Heterogeneity in Federated Learning through Weight-Driven Client Clustering [26.478852701376294]
フェデレートラーニング(Federated Learning, FL)は、分散機械学習のパラダイムである。
FLの主な課題の1つは、クライアントデバイスにまたがる不均一なデータ分散の存在である。
我々は,局所モデル重みとクライアントのデータ分布の相関を利用したCFLの新しい手法であるFedClustを提案する。
論文 参考訳(メタデータ) (2024-07-09T02:47:16Z) - PeFAD: A Parameter-Efficient Federated Framework for Time Series Anomaly Detection [51.20479454379662]
私たちはaを提案します。
フェデレートされた異常検出フレームワークであるPeFADは、プライバシーの懸念が高まっている。
我々は、4つの実際のデータセットに対して広範な評価を行い、PeFADは既存の最先端ベースラインを最大28.74%上回っている。
論文 参考訳(メタデータ) (2024-06-04T13:51:08Z) - Personalized Decentralized Federated Learning with Knowledge
Distillation [5.469841541565307]
フェデレート学習機能のパーソナライゼーションは、データや振る舞いのばらつきが高いクライアントのコーディネータとして機能する。
一般に、分散ネットワークにおいて、他のユーザーのモデルについて限られた知識の下で類似性を定量化することは困難である。
本研究では,局所モデル間の統計的距離を識別するために,知識蒸留技術を活用したパーソナライズされた完全分散FLアルゴリズムを提案する。
論文 参考訳(メタデータ) (2023-02-23T16:41:07Z) - Beyond ADMM: A Unified Client-variance-reduced Adaptive Federated
Learning Framework [82.36466358313025]
我々はFedVRAと呼ばれる原始二重FLアルゴリズムを提案し、このアルゴリズムはグローバルモデルの分散還元レベルとバイアスを適応的に制御することができる。
半教師付き画像分類タスクに基づく実験は,既存の手法よりもFedVRAの方が優れていることを示す。
論文 参考訳(メタデータ) (2022-12-03T03:27:51Z) - Efficient Distribution Similarity Identification in Clustered Federated
Learning via Principal Angles Between Client Data Subspaces [59.33965805898736]
クラスタ学習は、クライアントをクラスタにグループ化することで、有望な結果をもたらすことが示されている。
既存のFLアルゴリズムは基本的に、クライアントを同様のディストリビューションでグループ化しようとしている。
以前のFLアルゴリズムは、訓練中に間接的に類似性を試みていた。
論文 参考訳(メタデータ) (2022-09-21T17:37:54Z) - On the Convergence of Clustered Federated Learning [57.934295064030636]
統合学習システムでは、例えばモバイルデバイスや組織参加者といったクライアントは通常、個人の好みや行動パターンが異なる。
本稿では,クライアントグループと各クライアントを統一最適化フレームワークで活用する,新しい重み付きクライアントベースクラスタリングFLアルゴリズムを提案する。
論文 参考訳(メタデータ) (2022-02-13T02:39:19Z) - A Personalized Federated Learning Algorithm: an Application in Anomaly
Detection [0.6700873164609007]
フェデレートラーニング(FL)は、データプライバシと送信問題を克服する有望な方法として最近登場した。
FLでは、異なるデバイスやセンサーから収集されたデータセットを使用して、各学習を集中型モデル(サーバ)と共有するローカルモデル(クライアント)をトレーニングする。
本稿では,PC-FedAvg(Personalized FedAvg, PC-FedAvg)を提案する。
論文 参考訳(メタデータ) (2021-11-04T04:57:11Z) - Federated Multi-Target Domain Adaptation [99.93375364579484]
フェデレートされた学習手法により、プライバシを保護しながら、分散ユーザデータ上で機械学習モデルをトレーニングすることが可能になります。
分散クライアントデータがラベル付けされず、集中型ラベル付きデータセットがサーバ上で利用可能となる、より実用的なシナリオを考えます。
本稿では,新しい課題に対処する効果的なDualAdapt法を提案する。
論文 参考訳(メタデータ) (2021-08-17T17:53:05Z) - A Bayesian Federated Learning Framework with Online Laplace
Approximation [144.7345013348257]
フェデレートラーニングは、複数のクライアントが協力してグローバルに共有されたモデルを学ぶことを可能にする。
クライアント側とサーバ側の両方の後方部を近似するために,オンラインラプラス近似を用いた新しいFLフレームワークを提案する。
提案手法の利点を実証し,いくつかのベンチマークで最新の結果を得た。
論文 参考訳(メタデータ) (2021-02-03T08:36:58Z) - Decentralized Federated Learning via Mutual Knowledge Transfer [37.5341683644709]
分散型連合学習(DFL)は、モノのインターネット(IoT)システムにおける問題です。
現地のクライアントが学習した知識を相互に転送することでモデルを融合させる相互知識伝達(Def-KT)アルゴリズムを提案します。
MNIST, Fashion-MNIST, CIFAR10データセットに対する実験により,提案アルゴリズムがベースラインDFL法を著しく上回るデータセットを明らかにした。
論文 参考訳(メタデータ) (2020-12-24T01:43:53Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。