論文の概要: Topology-aware Federated Learning in Edge Computing: A Comprehensive
Survey
- arxiv url: http://arxiv.org/abs/2302.02573v1
- Date: Mon, 6 Feb 2023 05:33:16 GMT
- ステータス: 処理完了
- システム内更新日: 2023-02-07 17:32:12.668649
- Title: Topology-aware Federated Learning in Edge Computing: A Comprehensive
Survey
- Title(参考訳): エッジコンピューティングにおけるトポロジアウェアフェデレーション学習:包括的調査
- Authors: Jiajun Wu, Steve Drew, Fan Dong, Zhuangdi Zhu, Jiayu Zhou
- Abstract要約: フェデレートラーニング(FL)は、分散およびプライベートトレーニングデータを使用したエッジコンピューティングにおいて、巨大なユーザ所有デバイスに対する自然なソリューションであることが証明されている。
FedAvgに基づくほとんどのバニラFLアルゴリズムは、単純な星のトポロジーに従っている。
本稿では,ネットワークトポロジの最適化とともに,様々なタイプのエッジネットワークトポロジを紹介する。
- 参考スコア(独自算出の注目度): 32.487103201571664
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: The ultra-low latency requirements of 5G/6G applications and privacy
constraints call for distributed machine learning systems to be deployed at the
edge. With its simple yet effective approach, federated learning (FL) is proved
to be a natural solution for massive user-owned devices in edge computing with
distributed and private training data. Most vanilla FL algorithms based on
FedAvg follow a naive star topology, ignoring the heterogeneity and hierarchy
of the volatile edge computing architectures and topologies in reality. In this
paper, we conduct a comprehensive survey on the existing work of optimized FL
models, frameworks, and algorithms with a focus on their network topologies.
After a brief recap of FL and edge computing networks, we introduce various
types of edge network topologies, along with the optimizations under the
aforementioned network topologies. Lastly, we discuss the remaining challenges
and future works for applying FL in topology-specific edge networks.
- Abstract(参考訳): 5g/6gアプリケーションの超低レイテンシ要件とプライバシの制約は、エッジにデプロイされる分散機械学習システムを要求する。
シンプルで効果的なアプローチで、フェデレートドラーニング(FL)は、分散トレーニングデータとプライベートトレーニングデータを使ったエッジコンピューティングにおける、巨大なユーザ所有デバイスに対する自然なソリューションであることが証明されている。
FedAvgに基づくほとんどのバニラFLアルゴリズムは、不安定なエッジコンピューティングアーキテクチャとトポロジの不均一性と階層を無視して、単純な星トポロジに従う。
本稿では,ネットワークトポロジに焦点をあてた最適化flモデル,フレームワーク,アルゴリズムの既存作業に関する包括的調査を行う。
flおよびエッジコンピューティングネットワークの簡単な再定義の後、先述のネットワークトポロジの下での最適化とともに、様々な種類のエッジネットワークトポロジを紹介する。
最後に,トポロジ固有エッジネットワークにおけるflの適用に関する課題と今後の課題について述べる。
関連論文リスト
- Optimization Guarantees of Unfolded ISTA and ADMM Networks With Smooth
Soft-Thresholding [57.71603937699949]
我々は,学習エポックの数の増加とともに,ほぼゼロに近いトレーニング損失を達成するための最適化保証について検討した。
トレーニングサンプル数に対する閾値は,ネットワーク幅の増加とともに増加することを示す。
論文 参考訳(メタデータ) (2023-09-12T13:03:47Z) - Globally Gated Deep Linear Networks [3.04585143845864]
我々はGGDLN(Globally Gated Deep Linear Networks)を導入する。
有限幅熱力学極限におけるこれらのネットワークの一般化特性の正確な方程式を導出する。
我々の研究は、有限幅の非線形ネットワークの族における学習に関する最初の正確な理論解である。
論文 参考訳(メタデータ) (2022-10-31T16:21:56Z) - Accelerating Federated Edge Learning via Topology Optimization [41.830942005165625]
フェデレートエッジラーニング(FEEL)は、プライバシー保護の分散ラーニングを実現するための有望なパラダイムとして考えられている。
ストラグラー装置の存在により、過度の学習時間を消費する。
フェデレーション学習における不均一性問題に対処するために,新しいトポロジ最適化フェデレーション・エッジ・ラーニング(TOFEL)手法を提案する。
論文 参考訳(メタデータ) (2022-04-01T14:49:55Z) - Multi-task Federated Edge Learning (MtFEEL) in Wireless Networks [1.9250873974729816]
フェデレートラーニング(FL)は、エッジデバイス間の分散機械学習を扱うための有望な技術として進化してきた。
保証付き無線環境でのパーソナライズドラーニングのための通信効率の良いFLアルゴリズムを提案する。
論文 参考訳(メタデータ) (2021-08-05T10:54:38Z) - Reconfigurable Intelligent Surface Assisted Mobile Edge Computing with
Heterogeneous Learning Tasks [53.1636151439562]
モバイルエッジコンピューティング(MEC)は、AIアプリケーションに自然なプラットフォームを提供します。
再構成可能なインテリジェントサーフェス(RIS)の助けを借りて、MECで機械学習タスクを実行するインフラストラクチャを提示します。
具体的には,モバイルユーザの送信パワー,基地局のビームフォーミングベクトル,risの位相シフト行列を共同で最適化することにより,参加ユーザの学習誤差を最小化する。
論文 参考訳(メタデータ) (2020-12-25T07:08:50Z) - Edge-assisted Democratized Learning Towards Federated Analytics [67.44078999945722]
本稿では,エッジ支援型民主化学習機構であるEdge-DemLearnの階層的学習構造を示す。
また、Edge-DemLearnを柔軟なモデルトレーニングメカニズムとして検証し、リージョンに分散制御と集約の方法論を構築する。
論文 参考訳(メタデータ) (2020-12-01T11:46:03Z) - Learning Connectivity of Neural Networks from a Topological Perspective [80.35103711638548]
本稿では,ネットワークを解析のための完全なグラフに表現するためのトポロジ的視点を提案する。
接続の規模を反映したエッジに学習可能なパラメータを割り当てることにより、学習プロセスを異なる方法で行うことができる。
この学習プロセスは既存のネットワークと互換性があり、より大きな検索空間と異なるタスクへの適応性を持っている。
論文 参考訳(メタデータ) (2020-08-19T04:53:31Z) - From Federated to Fog Learning: Distributed Machine Learning over
Heterogeneous Wireless Networks [71.23327876898816]
フェデレートラーニング(Federated Learning)は、データを収集するノード間で処理能力を活用することによって、ネットワークエッジでMLモデルをトレーニングするテクニックとして登場した。
我々は、エッジデバイスからクラウドサーバへのノード連続体にMLモデルのトレーニングをインテリジェントに分散する、フォグラーニングと呼ばれる新しい学習パラダイムを提唱する。
論文 参考訳(メタデータ) (2020-06-07T05:11:18Z) - Deep Learning for Ultra-Reliable and Low-Latency Communications in 6G
Networks [84.2155885234293]
まず,データ駆動型教師付き深層学習と深部強化学習をURLLCに適用する方法を概説する。
このようなオープンな問題に対処するために、デバイスインテリジェンス、エッジインテリジェンス、およびURLLCのためのクラウドインテリジェンスを可能にするマルチレベルアーキテクチャを開発した。
論文 参考訳(メタデータ) (2020-02-22T14:38:11Z) - NeuroFabric: Identifying Ideal Topologies for Training A Priori Sparse
Networks [2.398608007786179]
ディープニューラルネットワークの長いトレーニング時間は、機械学習研究のボトルネックである。
層内トポロジーの選択に関する理論的基礎を提供する。
類似したトポロジが達成可能な精度に大きな差があることがよく示される。
論文 参考訳(メタデータ) (2020-02-19T18:29:18Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。