論文の概要: Sparse Mean Field Load Balancing in Large Localized Queueing Systems
- arxiv url: http://arxiv.org/abs/2312.12973v1
- Date: Wed, 20 Dec 2023 12:31:28 GMT
- ステータス: 処理完了
- システム内更新日: 2023-12-21 15:38:50.094210
- Title: Sparse Mean Field Load Balancing in Large Localized Queueing Systems
- Title(参考訳): 大規模局所待ち行列システムにおけるスパース平均場負荷分散
- Authors: Anam Tahir, Kai Cui, Heinz Koeppl
- Abstract要約: 我々は、疎結合な待ち行列ネットワークにおいて、疎最適負荷分散ポリシーをトラクタブルに学習する。
グラフのコンテキストにおける新しい平均場制御問題を有界次数で定式化することにより、他の難解なマルチエージェント問題を単一エージェント問題に還元する。
- 参考スコア(独自算出の注目度): 34.47298896806124
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Scalable load balancing algorithms are of great interest in cloud networks
and data centers, necessitating the use of tractable techniques to compute
optimal load balancing policies for good performance. However, most existing
scalable techniques, especially asymptotically scaling methods based on mean
field theory, have not been able to model large queueing networks with strong
locality. Meanwhile, general multi-agent reinforcement learning techniques can
be hard to scale and usually lack a theoretical foundation. In this work, we
address this challenge by leveraging recent advances in sparse mean field
theory to learn a near-optimal load balancing policy in sparsely connected
queueing networks in a tractable manner, which may be preferable to global
approaches in terms of communication overhead. Importantly, we obtain a general
load balancing framework for a large class of sparse bounded-degree topologies.
By formulating a novel mean field control problem in the context of graphs with
bounded degree, we reduce the otherwise difficult multi-agent problem to a
single-agent problem. Theoretically, the approach is justified by approximation
guarantees. Empirically, the proposed methodology performs well on several
realistic and scalable network topologies. Moreover, we compare it with a
number of well-known load balancing heuristics and with existing scalable
multi-agent reinforcement learning methods. Overall, we obtain a tractable
approach for load balancing in highly localized networks.
- Abstract(参考訳): スケーラブルなロードバランシングアルゴリズムは、クラウドネットワークやデータセンタに大きな関心を持ち、パフォーマンス向上のために最適なロードバランシングポリシを計算するために、トラクタブルなテクニックを使用する必要がある。
しかしながら、既存のほとんどのスケーラブルな手法、特に平均場理論に基づく漸近的スケーリング手法は、強い局所性を持つ大規模待ち行列ネットワークをモデル化できない。
一方、一般的なマルチエージェント強化学習技術はスケールが難しく、理論的な基礎が欠如している。
本研究では,スパース平均場理論の最近の進歩を利用して,疎結合な待ち行列ネットワークにおける準最適ロードバランシングポリシを扱いやすい方法で学習することで,通信オーバーヘッドの観点からのグローバルアプローチに好適な課題を解決する。
重要なことは、広い範囲の有界位相に対する一般的な負荷分散フレームワークを得ることである。
有界次数グラフの文脈で新しい平均場制御問題を定式化することにより、それ以外では難しいマルチエージェント問題を単一エージェント問題に還元する。
理論的には、アプローチは近似保証によって正当化される。
実証的に,提案手法は,現実的でスケーラブルなネットワークトポロジでよく機能する。
さらに,多くの負荷分散ヒューリスティックと,既存のスケーラブルなマルチエージェント強化学習手法との比較を行った。
全体として,高ローカライズドネットワークにおけるロードバランシングに対する扱いやすいアプローチを得た。
関連論文リスト
- Decentralized Learning Strategies for Estimation Error Minimization with Graph Neural Networks [94.2860766709971]
統計的に同一性を持つ無線ネットワークにおける自己回帰的マルコフ過程のサンプリングとリモート推定の課題に対処する。
我々のゴールは、分散化されたスケーラブルサンプリングおよび送信ポリシーを用いて、時間平均推定誤差と/または情報の年齢を最小化することである。
論文 参考訳(メタデータ) (2024-04-04T06:24:11Z) - Multi Agent DeepRL based Joint Power and Subchannel Allocation in IAB
networks [0.0]
統合アクセスとバックハウリング(IRL)は、将来の世代におけるより高いデータレートに対する前例のない要求を満たすための、実行可能なアプローチである。
本稿では,分数ノードに付随する巨大なアクション空間の問題を,Deep Q-Learning Networkを用いて処理する方法を示す。
論文 参考訳(メタデータ) (2023-08-31T21:30:25Z) - Towards a Better Theoretical Understanding of Independent Subnetwork Training [56.24689348875711]
独立サブネットワークトレーニング(IST)の理論的考察
ISTは、上記の問題を解決するための、最近提案され、非常に効果的である。
圧縮通信を用いた分散手法など,ISTと代替手法の基本的な違いを同定する。
論文 参考訳(メタデータ) (2023-06-28T18:14:22Z) - Neural Fields with Hard Constraints of Arbitrary Differential Order [61.49418682745144]
我々は、ニューラルネットワークに厳しい制約を課すための一連のアプローチを開発する。
制約は、ニューラルネットワークとそのデリバティブに適用される線形作用素として指定することができる。
私たちのアプローチは、広範囲の現実世界のアプリケーションで実証されています。
論文 参考訳(メタデータ) (2023-06-15T08:33:52Z) - Model-Free Learning of Optimal Deterministic Resource Allocations in
Wireless Systems via Action-Space Exploration [4.721069729610892]
本稿では,最適パラメータ化資源割り当てポリシーを効率的に学習するための,技術的基盤と拡張性のある2次元勾配法を提案する。
提案手法は, 深層ネットワークなどの一般的な普遍表現の勾配を効率よく活用するだけでなく, 低次元摂動により構築された関連するランダムネットワークサービスのゼロ階勾配近似を一貫したゼロ階勾配近似に頼っているため, 真のモデルフリーである。
論文 参考訳(メタデータ) (2021-08-23T18:26:16Z) - Efficient Model-Based Multi-Agent Mean-Field Reinforcement Learning [89.31889875864599]
マルチエージェントシステムにおける学習に有効なモデルベース強化学習アルゴリズムを提案する。
我々の理論的な貢献は、MFCのモデルベース強化学習における最初の一般的な後悔の限界である。
コア最適化問題の実用的なパラメトリゼーションを提供する。
論文 参考訳(メタデータ) (2021-07-08T18:01:02Z) - Graph Neural Networks for Scalable Radio Resource Management:
Architecture Design and Theoretical Analysis [31.372548374969387]
本稿では,大規模無線資源管理問題にグラフニューラルネットワーク(GNN)を適用することを提案する。
提案手法はスケーラビリティが高く,1つのGPU上で1,000ドルのトランシーバペアを6ミリ秒以内で行う干渉チャネルにおけるビームフォーミング問題を解くことができる。
論文 参考訳(メタデータ) (2020-07-15T11:43:32Z) - Generalization bound of globally optimal non-convex neural network
training: Transportation map estimation by infinite dimensional Langevin
dynamics [50.83356836818667]
本稿では,ディープラーニングの最適化を一般化誤差と関連づけて解析する理論フレームワークを提案する。
ニューラルネットワーク最適化分析のための平均場理論やニューラル・タンジェント・カーネル理論のような既存のフレームワークは、そのグローバル収束を示すために、ネットワークの無限幅の限界を取る必要がある。
論文 参考訳(メタデータ) (2020-07-11T18:19:50Z) - Decentralized MCTS via Learned Teammate Models [89.24858306636816]
本稿では,モンテカルロ木探索に基づくトレーニング可能なオンライン分散計画アルゴリズムを提案する。
深層学習と畳み込みニューラルネットワークを用いて正確なポリシー近似を作成可能であることを示す。
論文 参考訳(メタデータ) (2020-03-19T13:10:20Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。