論文の概要: Clustered Data Sharing for Non-IID Federated Learning over Wireless
Networks
- arxiv url: http://arxiv.org/abs/2302.10747v1
- Date: Fri, 17 Feb 2023 07:11:02 GMT
- ステータス: 処理完了
- システム内更新日: 2023-02-22 14:34:15.751740
- Title: Clustered Data Sharing for Non-IID Federated Learning over Wireless
Networks
- Title(参考訳): 無線ネットワーク上での非IIDフェデレーション学習のためのクラスタデータ共有
- Authors: Gang Hu, Yinglei Teng, Nan Wang, F. Richard Yu
- Abstract要約: Federated Learning (FL)は、IoT(Internet of Things)のデータを活用する分散型機械学習アプローチである。
現在のFLアルゴリズムは、非独立で同一の分散データ(非IID)の課題に直面しており、通信コストが高く、モデルの精度が低下する。
本稿では,デバイス間通信(D2D)を通じて,クラスタヘッドから信頼性の高いアソシエイトへの部分的データ通信を行うクラスタデータ共有フレームワークを提案する。
- 参考スコア(独自算出の注目度): 39.80420645943706
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Federated Learning (FL) is a novel distributed machine learning approach to
leverage data from Internet of Things (IoT) devices while maintaining data
privacy. However, the current FL algorithms face the challenges of
non-independent and identically distributed (non-IID) data, which causes high
communication costs and model accuracy declines. To address the statistical
imbalances in FL, we propose a clustered data sharing framework which spares
the partial data from cluster heads to credible associates through
device-to-device (D2D) communication. Moreover, aiming at diluting the data
skew on nodes, we formulate the joint clustering and data sharing problem based
on the privacy-preserving constrained graph. To tackle the serious coupling of
decisions on the graph, we devise a distribution-based adaptive clustering
algorithm (DACA) basing on three deductive cluster-forming conditions, which
ensures the maximum yield of data sharing. The experiments show that the
proposed framework facilitates FL on non-IID datasets with better convergence
and model accuracy under a limited communication environment.
- Abstract(参考訳): Federated Learning(FL)は、IoT(Internet of Things)デバイスのデータをデータプライバシを維持しながら活用する、新たな分散機械学習アプローチである。
しかし、現在のflアルゴリズムは、非独立かつ同一分散(非iid)データの課題に直面しているため、高い通信コストとモデルの精度が低下する。
FLにおける統計的不均衡に対処するため、デバイス間通信(D2D)を介してクラスタヘッドから信頼性のあるアソシエイトへの部分的データを回避できるクラスタデータ共有フレームワークを提案する。
さらに,ノード上のデータを分割することを目的として,プライバシ保存制約付きグラフに基づく統合クラスタリングとデータ共有問題を定式化する。
グラフ上の決定の真剣なカップリングに対処するため,3つの帰納的クラスタ形成条件に基づく分散型適応クラスタリングアルゴリズム(DACA)を考案し,データ共有の最大収量を確保する。
実験により,本フレームワークは,限られた通信環境下での収束性やモデル精度が向上した非IIDデータセット上でFLを促進することを示した。
関連論文リスト
- Generative AI-Powered Plugin for Robust Federated Learning in Heterogeneous IoT Networks [3.536605202672355]
フェデレーション学習により、エッジデバイスは、データのローカライズを維持しながら、データのプライバシを維持しながら、グローバルモデルを協調的にトレーニングすることが可能になる。
我々は,AI強化データ拡張と均衡サンプリング戦略により,IIDからIDDへの非IIDデータ分布を近似する,フェデレーション最適化技術のための新しいプラグインを提案する。
論文 参考訳(メタデータ) (2024-10-31T11:13:47Z) - Faster Convergence on Heterogeneous Federated Edge Learning: An Adaptive Clustered Data Sharing Approach [27.86468387141422]
Federated Edge Learning (FEEL)は、6G Hyper-Connectivityのための分散機械学習パラダイムのパイオニアとして登場した。
現在のFEELアルゴリズムは、非独立かつ非独立に分散した(非IID)データと競合し、通信コストの上昇とモデルの精度が損なわれる。
我々はクラスタ化データ共有フレームワークを導入し、クラスタヘッドから信頼されたアソシエイトに部分的なデータを選択的に共有することで、データの均一性を緩和する。
実験により, このフレームワークは, 限られた通信環境において, 収束速度が速く, モデル精度が高い非IIDデータセット上で FEEL を促進することを示した。
論文 参考訳(メタデータ) (2024-06-14T07:22:39Z) - Adaptive Model Pruning and Personalization for Federated Learning over
Wireless Networks [72.59891661768177]
フェデレーション学習(FL)は、データプライバシを保護しながら、エッジデバイス間での分散学習を可能にする。
これらの課題を克服するために、部分的なモデルプルーニングとパーソナライズを備えたFLフレームワークを検討する。
このフレームワークは、学習モデルを、データ表現を学ぶためにすべてのデバイスと共有されるモデルプルーニングと、特定のデバイスのために微調整されるパーソナライズされた部分とで、グローバルな部分に分割する。
論文 参考訳(メタデータ) (2023-09-04T21:10:45Z) - Analysis and Optimization of Wireless Federated Learning with Data
Heterogeneity [72.85248553787538]
本稿では、データの不均一性を考慮した無線FLの性能解析と最適化と、無線リソース割り当てについて述べる。
ロス関数の最小化問題を、長期エネルギー消費と遅延の制約の下で定式化し、クライアントスケジューリング、リソース割り当て、ローカルトレーニングエポック数(CRE)を共同で最適化する。
実世界のデータセットの実験により、提案アルゴリズムは学習精度とエネルギー消費の点で他のベンチマークよりも優れていることが示された。
論文 参考訳(メタデータ) (2023-08-04T04:18:01Z) - PS-FedGAN: An Efficient Federated Learning Framework Based on Partially
Shared Generative Adversarial Networks For Data Privacy [56.347786940414935]
分散計算のための効果的な学習パラダイムとして、フェデレートラーニング(FL)が登場した。
本研究は,部分的なGANモデル共有のみを必要とする新しいFLフレームワークを提案する。
PS-FedGANと名付けられたこの新しいフレームワークは、異種データ分散に対処するためのGANリリースおよびトレーニングメカニズムを強化する。
論文 参考訳(メタデータ) (2023-05-19T05:39:40Z) - Benchmarking FedAvg and FedCurv for Image Classification Tasks [1.376408511310322]
本稿では,同じフェデレーションネットワークにおけるデータの統計的不均一性の問題に焦点をあてる。
FedAvg、FedProx、Federated Curvature(FedCurv)など、いくつかのフェデレートラーニングアルゴリズムがすでに提案されている。
この研究の副産物として、FLコミュニティからのさらなる比較を容易にするために使用したデータセットの非IIDバージョンをリリースします。
論文 参考訳(メタデータ) (2023-03-31T10:13:01Z) - Rethinking Data Heterogeneity in Federated Learning: Introducing a New
Notion and Standard Benchmarks [65.34113135080105]
我々は、現在のセットアップにおけるデータ不均一性の問題が必ずしも問題であるだけでなく、FL参加者にとって有益であることを示す。
私たちの観察は直感的である。
私たちのコードはhttps://github.com/MMorafah/FL-SC-NIIDで利用可能です。
論文 参考訳(メタデータ) (2022-09-30T17:15:19Z) - Local Learning Matters: Rethinking Data Heterogeneity in Federated
Learning [61.488646649045215]
フェデレートラーニング(FL)は、クライアントのネットワーク(エッジデバイス)でプライバシ保護、分散ラーニングを行うための有望な戦略である。
論文 参考訳(メタデータ) (2021-11-28T19:03:39Z) - Communication-Efficient Hierarchical Federated Learning for IoT
Heterogeneous Systems with Imbalanced Data [42.26599494940002]
フェデレートラーニング(Federated Learning, FL)は、複数のノードが協調してディープラーニングモデルをトレーニングできる分散ラーニング方法論である。
本稿では,IoTヘテロジニアスシステムにおける階層FLの可能性について検討する。
複数のエッジノード上でのユーザ割り当てとリソース割り当てに最適化されたソリューションを提案する。
論文 参考訳(メタデータ) (2021-07-14T08:32:39Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。