論文の概要: When Deep Reinforcement Learning Meets Federated Learning: Intelligent
Multi-Timescale Resource Management for Multi-access Edge Computing in 5G
Ultra Dense Network
- arxiv url: http://arxiv.org/abs/2009.10601v1
- Date: Tue, 22 Sep 2020 15:08:00 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-15 23:19:36.747125
- Title: When Deep Reinforcement Learning Meets Federated Learning: Intelligent
Multi-Timescale Resource Management for Multi-access Edge Computing in 5G
Ultra Dense Network
- Title(参考訳): 深層強化学習とフェデレーションラーニング:5G Ultra Dense Networkにおけるマルチアクセスエッジコンピューティングのためのインテリジェントなマルチスケールリソース管理
- Authors: Shuai Yu and Xu Chen and Zhi Zhou and Xiaowen Gong and Di Wu
- Abstract要約: まず,ブロックチェーンとAIを5Gエッジコンピューティングネットワークに統合した,インテリジェントな超高密度エッジコンピューティング(I-UDEC)フレームワークを提案する。
実時間および低オーバーヘッド計算のオフロード決定と資源配分戦略を実現するために,新しい2段階の深層強化学習法(textit2Ts-DRL)を設計する。
提案アルゴリズムはタスク実行時間を最大31.87%削減できる。
- 参考スコア(独自算出の注目度): 31.274279003934268
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Ultra-dense edge computing (UDEC) has great potential, especially in the 5G
era, but it still faces challenges in its current solutions, such as the lack
of: i) efficient utilization of multiple 5G resources (e.g., computation,
communication, storage and service resources); ii) low overhead offloading
decision making and resource allocation strategies; and iii) privacy and
security protection schemes. Thus, we first propose an intelligent ultra-dense
edge computing (I-UDEC) framework, which integrates blockchain and Artificial
Intelligence (AI) into 5G ultra-dense edge computing networks. First, we show
the architecture of the framework. Then, in order to achieve real-time and low
overhead computation offloading decisions and resource allocation strategies,
we design a novel two-timescale deep reinforcement learning (\textit{2Ts-DRL})
approach, consisting of a fast-timescale and a slow-timescale learning process,
respectively. The primary objective is to minimize the total offloading delay
and network resource usage by jointly optimizing computation offloading,
resource allocation and service caching placement. We also leverage federated
learning (FL) to train the \textit{2Ts-DRL} model in a distributed manner,
aiming to protect the edge devices' data privacy. Simulation results
corroborate the effectiveness of both the \textit{2Ts-DRL} and FL in the I-UDEC
framework and prove that our proposed algorithm can reduce task execution time
up to 31.87%.
- Abstract(参考訳): ultra-dense edge computing (udec)は、特に5g時代には大きな可能性を秘めているが、現在のソリューションでは、次のような課題に直面している。
一 複数の5G資源の効率的な利用(例えば、計算、通信、記憶及びサービス資源)
二 低オーバーヘッドオフロード意思決定及び資源配分戦略
三 プライバシー及びセキュリティ保護のスキーム
そこで我々はまず,ブロックチェーンと人工知能(AI)を5G超高密度エッジコンピューティングネットワークに統合した,インテリジェントな超高密度エッジコンピューティング(I-UDEC)フレームワークを提案する。
まず、フレームワークのアーキテクチャを説明します。
そして, リアルタイムおよび低オーバーヘッド計算のオフロード決定と資源配分戦略を実現するために, 高速および低速の学習プロセスからなる新しい2段階の深層強化学習(\textit{2Ts-DRL})手法を設計する。
主な目的は、計算オフロード、リソース割り当て、サービスキャッシング配置を共同で最適化することで、全体のオフロード遅延とネットワークリソース使用量を最小化することである。
また、フェデレーション学習(FL)を活用して、エッジデバイスのデータプライバシを保護するために、分散型で \textit{2Ts-DRL} モデルをトレーニングします。
シミュレーション結果は,I-UDECフレームワークにおけるtextit{2Ts-DRL}とFLの有効性を相関させ,提案アルゴリズムがタスク実行時間を最大31.87%削減できることを示す。
関連論文リスト
- Leveraging Federated Learning and Edge Computing for Recommendation
Systems within Cloud Computing Networks [3.36271475827981]
エッジインテリジェンスの鍵となる技術は、フェデレートラーニング(FL)として知られる、プライバシ保護機械学習パラダイムである。
ノード障害とデバイス終了を減らすため、階層的フェデレートラーニング(HFL)フレームワークが提案され、指定されたクラスタリーダが中間モデルアグリゲーションを通じてデータオーナをサポートする。
ユーザエクスペリエンスの品質(QoE)に対するソフトクリックの影響を軽減するため、著者らは、ユーザQoEを包括的なシステムコストとしてモデル化した。
論文 参考訳(メタデータ) (2024-03-05T17:58:26Z) - Artificial Intelligence Empowered Multiple Access for Ultra Reliable and
Low Latency THz Wireless Networks [76.89730672544216]
テラヘルツ(THz)無線ネットワークは、第5世代(B5G)以上の時代を触媒すると予想されている。
いくつかのB5Gアプリケーションの超信頼性と低レイテンシ要求を満たすためには、新しいモビリティ管理アプローチが必要である。
本稿では、インテリジェントなユーザアソシエーションとリソースアロケーションを実現するとともに、フレキシブルで適応的なモビリティ管理を可能にする、全体論的MAC層アプローチを提案する。
論文 参考訳(メタデータ) (2022-08-17T03:00:24Z) - Deep Reinforcement Learning Based Multidimensional Resource Management
for Energy Harvesting Cognitive NOMA Communications [64.1076645382049]
エネルギー収穫(EH)、認知無線(CR)、非直交多重アクセス(NOMA)の組み合わせはエネルギー効率を向上させるための有望な解決策である。
本稿では,決定論的CR-NOMA IoTシステムにおけるスペクトル,エネルギー,時間資源管理について検討する。
論文 参考訳(メタデータ) (2021-09-17T08:55:48Z) - A Heuristically Assisted Deep Reinforcement Learning Approach for
Network Slice Placement [0.7885276250519428]
本稿では,Deep Reinforcement Learning(DRL)に基づくハイブリッド配置ソリューションと,Power of Two Choices原則に基づく専用最適化を提案する。
提案したHuristically-Assisted DRL (HA-DRL) は,他の最先端手法と比較して学習プロセスの高速化と資源利用の促進を可能にする。
論文 参考訳(メタデータ) (2021-05-14T10:04:17Z) - Federated Double Deep Q-learning for Joint Delay and Energy Minimization
in IoT networks [12.599009485247283]
本稿では,多目的最適化問題の解法として,連合型深層強化学習フレームワークを提案する。
各エピソードの最後に,IoTデバイス(エージェント)の学習速度を高めるために,フェデレーション学習(FDL)を取り入れた。
提案するDDQNフレームワークの有効性を,学習速度の観点から検証した。
論文 参考訳(メタデータ) (2021-04-02T18:41:59Z) - Deep Learning-based Resource Allocation For Device-to-Device
Communication [66.74874646973593]
デバイス間通信(D2D)を用いたマルチチャネルセルシステムにおいて,リソース割り当ての最適化のためのフレームワークを提案する。
任意のチャネル条件に対する最適な資源配分戦略をディープニューラルネットワーク(DNN)モデルにより近似する深層学習(DL)フレームワークを提案する。
シミュレーションの結果,提案手法のリアルタイム性能を低速で実現できることが確認された。
論文 参考訳(メタデータ) (2020-11-25T14:19:23Z) - A Machine Learning Approach for Task and Resource Allocation in Mobile
Edge Computing Based Networks [108.57859531628264]
無線ネットワークにおいて,共同作業,スペクトル,送信電力配分問題について検討する。
提案アルゴリズムは、標準Q-ラーニングアルゴリズムと比較して、収束に必要なイテレーション数と全ユーザの最大遅延を最大18%、11.1%削減することができる。
論文 参考訳(メタデータ) (2020-07-20T13:46:42Z) - Multi-agent Reinforcement Learning for Resource Allocation in IoT
networks with Edge Computing [16.129649374251088]
エンドユーザーが計算をオフロードするのは、スペクトルとリソースに対する大きな要求のためである。
本稿では,IoTエッジコンピューティングネットワークにおけるリソース割り当てを伴うオフロード機構をゲームとして定式化することによって検討する。
論文 参考訳(メタデータ) (2020-04-05T20:59:20Z) - Joint Parameter-and-Bandwidth Allocation for Improving the Efficiency of
Partitioned Edge Learning [73.82875010696849]
機械学習アルゴリズムは、人工知能(AI)モデルをトレーニングするために、ネットワークエッジにデプロイされる。
本稿では,パラメータ(計算負荷)割り当てと帯域幅割り当ての新しい共同設計に焦点を当てる。
論文 参考訳(メタデータ) (2020-03-10T05:52:15Z) - Deep Learning for Ultra-Reliable and Low-Latency Communications in 6G
Networks [84.2155885234293]
まず,データ駆動型教師付き深層学習と深部強化学習をURLLCに適用する方法を概説する。
このようなオープンな問題に対処するために、デバイスインテリジェンス、エッジインテリジェンス、およびURLLCのためのクラウドインテリジェンスを可能にするマルチレベルアーキテクチャを開発した。
論文 参考訳(メタデータ) (2020-02-22T14:38:11Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。