論文の概要: When Deep Reinforcement Learning Meets Federated Learning: Intelligent
Multi-Timescale Resource Management for Multi-access Edge Computing in 5G
Ultra Dense Network
- arxiv url: http://arxiv.org/abs/2009.10601v1
- Date: Tue, 22 Sep 2020 15:08:00 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-15 23:19:36.747125
- Title: When Deep Reinforcement Learning Meets Federated Learning: Intelligent
Multi-Timescale Resource Management for Multi-access Edge Computing in 5G
Ultra Dense Network
- Title(参考訳): 深層強化学習とフェデレーションラーニング:5G Ultra Dense Networkにおけるマルチアクセスエッジコンピューティングのためのインテリジェントなマルチスケールリソース管理
- Authors: Shuai Yu and Xu Chen and Zhi Zhou and Xiaowen Gong and Di Wu
- Abstract要約: まず,ブロックチェーンとAIを5Gエッジコンピューティングネットワークに統合した,インテリジェントな超高密度エッジコンピューティング(I-UDEC)フレームワークを提案する。
実時間および低オーバーヘッド計算のオフロード決定と資源配分戦略を実現するために,新しい2段階の深層強化学習法(textit2Ts-DRL)を設計する。
提案アルゴリズムはタスク実行時間を最大31.87%削減できる。
- 参考スコア(独自算出の注目度): 31.274279003934268
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Ultra-dense edge computing (UDEC) has great potential, especially in the 5G
era, but it still faces challenges in its current solutions, such as the lack
of: i) efficient utilization of multiple 5G resources (e.g., computation,
communication, storage and service resources); ii) low overhead offloading
decision making and resource allocation strategies; and iii) privacy and
security protection schemes. Thus, we first propose an intelligent ultra-dense
edge computing (I-UDEC) framework, which integrates blockchain and Artificial
Intelligence (AI) into 5G ultra-dense edge computing networks. First, we show
the architecture of the framework. Then, in order to achieve real-time and low
overhead computation offloading decisions and resource allocation strategies,
we design a novel two-timescale deep reinforcement learning (\textit{2Ts-DRL})
approach, consisting of a fast-timescale and a slow-timescale learning process,
respectively. The primary objective is to minimize the total offloading delay
and network resource usage by jointly optimizing computation offloading,
resource allocation and service caching placement. We also leverage federated
learning (FL) to train the \textit{2Ts-DRL} model in a distributed manner,
aiming to protect the edge devices' data privacy. Simulation results
corroborate the effectiveness of both the \textit{2Ts-DRL} and FL in the I-UDEC
framework and prove that our proposed algorithm can reduce task execution time
up to 31.87%.
- Abstract(参考訳): ultra-dense edge computing (udec)は、特に5g時代には大きな可能性を秘めているが、現在のソリューションでは、次のような課題に直面している。
一 複数の5G資源の効率的な利用(例えば、計算、通信、記憶及びサービス資源)
二 低オーバーヘッドオフロード意思決定及び資源配分戦略
三 プライバシー及びセキュリティ保護のスキーム
そこで我々はまず,ブロックチェーンと人工知能(AI)を5G超高密度エッジコンピューティングネットワークに統合した,インテリジェントな超高密度エッジコンピューティング(I-UDEC)フレームワークを提案する。
まず、フレームワークのアーキテクチャを説明します。
そして, リアルタイムおよび低オーバーヘッド計算のオフロード決定と資源配分戦略を実現するために, 高速および低速の学習プロセスからなる新しい2段階の深層強化学習(\textit{2Ts-DRL})手法を設計する。
主な目的は、計算オフロード、リソース割り当て、サービスキャッシング配置を共同で最適化することで、全体のオフロード遅延とネットワークリソース使用量を最小化することである。
また、フェデレーション学習(FL)を活用して、エッジデバイスのデータプライバシを保護するために、分散型で \textit{2Ts-DRL} モデルをトレーニングします。
シミュレーション結果は,I-UDECフレームワークにおけるtextit{2Ts-DRL}とFLの有効性を相関させ,提案アルゴリズムがタスク実行時間を最大31.87%削減できることを示す。
関連論文リスト
- Two-Timescale Model Caching and Resource Allocation for Edge-Enabled AI-Generated Content Services [55.0337199834612]
Generative AI(GenAI)は、カスタマイズされたパーソナライズされたAI生成コンテンツ(AIGC)サービスを可能にするトランスフォーメーション技術として登場した。
これらのサービスは数十億のパラメータを持つGenAIモデルの実行を必要とし、リソース制限の無線エッジに重大な障害を生じさせる。
我々は、AIGC品質とレイテンシメトリクスのトレードオフをバランスさせるために、AIGCサービスのジョイントモデルキャッシングとリソースアロケーションの定式化を導入する。
論文 参考訳(メタデータ) (2024-11-03T07:01:13Z) - DNN Partitioning, Task Offloading, and Resource Allocation in Dynamic Vehicular Networks: A Lyapunov-Guided Diffusion-Based Reinforcement Learning Approach [49.56404236394601]
本稿では,Vehicular Edge Computingにおける共同DNNパーティショニング,タスクオフロード,リソース割り当ての問題を定式化する。
我々の目標は、時間とともにシステムの安定性を保証しながら、DNNベースのタスク完了時間を最小化することである。
拡散モデルの革新的利用を取り入れたマルチエージェント拡散に基づく深層強化学習(MAD2RL)アルゴリズムを提案する。
論文 参考訳(メタデータ) (2024-06-11T06:31:03Z) - Edge Intelligence Optimization for Large Language Model Inference with Batching and Quantization [20.631476379056892]
大規模言語モデル(LLM)がこの運動の最前線にある。
LLMはクラウドホスティングを必要とするため、プライバシやレイテンシ、使用制限に関する問題が発生する。
LLM推論に適したエッジインテリジェンス最適化問題を提案する。
論文 参考訳(メタデータ) (2024-05-12T02:38:58Z) - Leveraging Federated Learning and Edge Computing for Recommendation
Systems within Cloud Computing Networks [3.36271475827981]
エッジインテリジェンスの鍵となる技術は、フェデレートラーニング(FL)として知られる、プライバシ保護機械学習パラダイムである。
ノード障害とデバイス終了を減らすため、階層的フェデレートラーニング(HFL)フレームワークが提案され、指定されたクラスタリーダが中間モデルアグリゲーションを通じてデータオーナをサポートする。
ユーザエクスペリエンスの品質(QoE)に対するソフトクリックの影響を軽減するため、著者らは、ユーザQoEを包括的なシステムコストとしてモデル化した。
論文 参考訳(メタデータ) (2024-03-05T17:58:26Z) - Artificial Intelligence Empowered Multiple Access for Ultra Reliable and
Low Latency THz Wireless Networks [76.89730672544216]
テラヘルツ(THz)無線ネットワークは、第5世代(B5G)以上の時代を触媒すると予想されている。
いくつかのB5Gアプリケーションの超信頼性と低レイテンシ要求を満たすためには、新しいモビリティ管理アプローチが必要である。
本稿では、インテリジェントなユーザアソシエーションとリソースアロケーションを実現するとともに、フレキシブルで適応的なモビリティ管理を可能にする、全体論的MAC層アプローチを提案する。
論文 参考訳(メタデータ) (2022-08-17T03:00:24Z) - Deep Reinforcement Learning Based Multidimensional Resource Management
for Energy Harvesting Cognitive NOMA Communications [64.1076645382049]
エネルギー収穫(EH)、認知無線(CR)、非直交多重アクセス(NOMA)の組み合わせはエネルギー効率を向上させるための有望な解決策である。
本稿では,決定論的CR-NOMA IoTシステムにおけるスペクトル,エネルギー,時間資源管理について検討する。
論文 参考訳(メタデータ) (2021-09-17T08:55:48Z) - A Heuristically Assisted Deep Reinforcement Learning Approach for
Network Slice Placement [0.7885276250519428]
本稿では,Deep Reinforcement Learning(DRL)に基づくハイブリッド配置ソリューションと,Power of Two Choices原則に基づく専用最適化を提案する。
提案したHuristically-Assisted DRL (HA-DRL) は,他の最先端手法と比較して学習プロセスの高速化と資源利用の促進を可能にする。
論文 参考訳(メタデータ) (2021-05-14T10:04:17Z) - Multi-agent Reinforcement Learning for Resource Allocation in IoT
networks with Edge Computing [16.129649374251088]
エンドユーザーが計算をオフロードするのは、スペクトルとリソースに対する大きな要求のためである。
本稿では,IoTエッジコンピューティングネットワークにおけるリソース割り当てを伴うオフロード機構をゲームとして定式化することによって検討する。
論文 参考訳(メタデータ) (2020-04-05T20:59:20Z) - Joint Parameter-and-Bandwidth Allocation for Improving the Efficiency of
Partitioned Edge Learning [73.82875010696849]
機械学習アルゴリズムは、人工知能(AI)モデルをトレーニングするために、ネットワークエッジにデプロイされる。
本稿では,パラメータ(計算負荷)割り当てと帯域幅割り当ての新しい共同設計に焦点を当てる。
論文 参考訳(メタデータ) (2020-03-10T05:52:15Z) - Deep Learning for Ultra-Reliable and Low-Latency Communications in 6G
Networks [84.2155885234293]
まず,データ駆動型教師付き深層学習と深部強化学習をURLLCに適用する方法を概説する。
このようなオープンな問題に対処するために、デバイスインテリジェンス、エッジインテリジェンス、およびURLLCのためのクラウドインテリジェンスを可能にするマルチレベルアーキテクチャを開発した。
論文 参考訳(メタデータ) (2020-02-22T14:38:11Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。