論文の概要: Network Resource Allocation Strategy Based on Deep Reinforcement
Learning
- arxiv url: http://arxiv.org/abs/2202.03193v1
- Date: Thu, 3 Feb 2022 06:53:00 GMT
- ステータス: 処理完了
- システム内更新日: 2022-02-08 18:43:42.885234
- Title: Network Resource Allocation Strategy Based on Deep Reinforcement
Learning
- Title(参考訳): 深層強化学習に基づくネットワーク資源配分戦略
- Authors: Shidong Zhang, Chao Wang, Junsan Zhang, Youxiang Duan, Xinhong You,
and Peiying Zhang
- Abstract要約: 本稿では,深部強化学習(DRL)に基づく二段階VNEアルゴリズムを提案する。
MLに基づく既存のVNEアルゴリズムは、基板ネットワーク表現とトレーニングモードの重要性を無視することが多いため、フル属性行列(FAM-DRL-VNE)に基づくDRL VNEアルゴリズムを提案する。
実験の結果,上記のアルゴリズムは他のアルゴリズムよりも優れていることがわかった。
- 参考スコア(独自算出の注目度): 4.751282319342761
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: The traditional Internet has encountered a bottleneck in allocating network
resources for emerging technology needs. Network virtualization (NV) technology
as a future network architecture, the virtual network embedding (VNE) algorithm
it supports shows great potential in solving resource allocation problems.
Combined with the efficient machine learning (ML) algorithm, a neural network
model close to the substrate network environment is constructed to train the
reinforcement learning agent. This paper proposes a two-stage VNE algorithm
based on deep reinforcement learning (DRL) (TS-DRL-VNE) for the problem that
the mapping result of existing heuristic algorithm is easy to converge to the
local optimal solution. For the problem that the existing VNE algorithm based
on ML often ignores the importance of substrate network representation and
training mode, a DRL VNE algorithm based on full attribute matrix (FAM-DRL-VNE)
is proposed. In view of the problem that the existing VNE algorithm often
ignores the underlying resource changes between virtual network requests, a DRL
VNE algorithm based on matrix perturbation theory (MPT-DRL-VNE) is proposed.
Experimental results show that the above algorithm is superior to other
algorithms.
- Abstract(参考訳): 従来のインターネットは、新興技術のニーズにネットワークリソースを割り当てるボトルネックに直面してきた。
将来的なネットワークアーキテクチャとしてのネットワーク仮想化(NV)技術,それをサポートする仮想ネットワーク埋め込み(VNE)アルゴリズムは,リソース割り当て問題を解決する大きな可能性を示している。
効率的な機械学習(ml)アルゴリズムと組み合わせることで、強化学習エージェントを訓練するために、基盤ネットワーク環境に近いニューラルネットワークモデルを構築する。
本稿では,既存のヒューリスティックアルゴリズムのマッピング結果が局所最適解に収束しやすいという問題に対して,深部強化学習(DRL)に基づく2段階VNEアルゴリズムを提案する。
MLに基づく既存のVNEアルゴリズムは、基板ネットワーク表現とトレーニングモードの重要性を無視することが多いため、フル属性行列(FAM-DRL-VNE)に基づくDRL VNEアルゴリズムを提案する。
既存のVNEアルゴリズムが仮想ネットワーク要求間のリソース変化を無視する問題として,行列摂動理論(MPT-DRL-VNE)に基づくDRL VNEアルゴリズムを提案する。
実験の結果,上記のアルゴリズムは他のアルゴリズムよりも優れていることがわかった。
関連論文リスト
- Joint Admission Control and Resource Allocation of Virtual Network Embedding via Hierarchical Deep Reinforcement Learning [69.00997996453842]
本稿では,仮想ネットワークの埋め込みにおいて,入出力制御と資源配分を併用して学習する深層強化学習手法を提案する。
HRL-ACRAは,受入率と長期平均収益の両面で,最先端のベースラインを上回っていることを示す。
論文 参考訳(メタデータ) (2024-06-25T07:42:30Z) - DNN Partitioning, Task Offloading, and Resource Allocation in Dynamic Vehicular Networks: A Lyapunov-Guided Diffusion-Based Reinforcement Learning Approach [49.56404236394601]
本稿では,Vehicular Edge Computingにおける共同DNNパーティショニング,タスクオフロード,リソース割り当ての問題を定式化する。
我々の目標は、時間とともにシステムの安定性を保証しながら、DNNベースのタスク完了時間を最小化することである。
拡散モデルの革新的利用を取り入れたマルチエージェント拡散に基づく深層強化学習(MAD2RL)アルゴリズムを提案する。
論文 参考訳(メタデータ) (2024-06-11T06:31:03Z) - Intelligent Hybrid Resource Allocation in MEC-assisted RAN Slicing Network [72.2456220035229]
我々は,協調型MEC支援RANスライシングシステムにおける異種サービス要求に対するSSRの最大化を目指す。
最適ハイブリッドRAポリシーをインテリジェントに学習するためのRGRLアルゴリズムを提案する。
論文 参考訳(メタデータ) (2024-05-02T01:36:13Z) - Multi Objective Resource Optimization of Wireless Network Based on Cross
Domain Virtual Network Embedding [6.019028366261091]
本稿では,無線ネットワークリソース割り当てのための多目的最適化VNEアルゴリズムを提案する。
提案した目的式によると、最適化マッピングコスト、ネットワーク遅延、VNR受け入れ率について検討する。
論文 参考訳(メタデータ) (2022-02-03T07:26:10Z) - IoV Scenario: Implementation of a Bandwidth Aware Algorithm in Wireless
Network Communication Mode [49.734868032441625]
本稿では,マルチドメイン仮想ネットワーク埋め込みアルゴリズム(BA-VNE)を提案する。
このアルゴリズムは主に、ユーザが無線通信モードで多くの帯域幅を必要とする問題を対象としている。
本アルゴリズムの性能向上のために,粒子群最適化(PSO)アルゴリズムを導入する。
論文 参考訳(メタデータ) (2022-02-03T03:34:06Z) - Dynamic Virtual Network Embedding Algorithm based on Graph Convolution
Neural Network and Reinforcement Learning [15.394489762270162]
本稿では,このアルゴリズムに強化学習(RL)とグラフニューラルネットワーク(GNN)理論を適用した新しいタイプのVNEアルゴリズムを提案する。
自己定義された適合行列と適合値に基づいて,アルゴリズム実装の目的関数を設定し,効率的な動的VNEアルゴリズムを実現し,資源の断片化の度合いを効果的に低減した。
論文 参考訳(メタデータ) (2022-02-03T02:37:45Z) - Resource Management and Security Scheme of ICPSs and IoT Based on VNE
Algorithm [28.48822311639421]
ICPSにおける資源割り当ての合理性と安全性を確保するために,仮想ネットワーク組み込み(VNE)アルゴリズムを提案する。
特に、アルゴリズム性能を改善する手段として強化学習法(RL)を用いる。
これは、計算、ストレージ、セキュリティの3次元リソースの制約を考慮した総合的な2段階RL-VNEアルゴリズムである。
論文 参考訳(メタデータ) (2022-02-03T02:27:20Z) - A Heuristically Assisted Deep Reinforcement Learning Approach for
Network Slice Placement [0.7885276250519428]
本稿では,Deep Reinforcement Learning(DRL)に基づくハイブリッド配置ソリューションと,Power of Two Choices原則に基づく専用最適化を提案する。
提案したHuristically-Assisted DRL (HA-DRL) は,他の最先端手法と比較して学習プロセスの高速化と資源利用の促進を可能にする。
論文 参考訳(メタデータ) (2021-05-14T10:04:17Z) - Resource Allocation via Model-Free Deep Learning in Free Space Optical
Communications [119.81868223344173]
本稿では,自由空間光学(FSO)通信におけるチャネルフェージング効果の緩和のための資源配分の一般的な問題について検討する。
本フレームワークでは,FSO資源割り当て問題を解決する2つのアルゴリズムを提案する。
論文 参考訳(メタデータ) (2020-07-27T17:38:51Z) - Iterative Algorithm Induced Deep-Unfolding Neural Networks: Precoding
Design for Multiuser MIMO Systems [59.804810122136345]
本稿では,AIIDNN(ディープ・アンフォールディング・ニューラルネット)を一般化した,ディープ・アンフォールディングのためのフレームワークを提案する。
古典的重み付き最小二乗誤差(WMMSE)反復アルゴリズムの構造に基づく効率的なIAIDNNを提案する。
提案したIAIDNNは,計算複雑性を低減した反復WMMSEアルゴリズムの性能を効率よく向上することを示す。
論文 参考訳(メタデータ) (2020-06-15T02:57:57Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。