論文の概要: Temporally Consistent Graph Q-Networks for Intelligent Network Control
- arxiv url: http://arxiv.org/abs/2606.13848v1
- Date: Thu, 11 Jun 2026 19:25:57 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-06-15 16:00:42.600912
- Title: Temporally Consistent Graph Q-Networks for Intelligent Network Control
- Title(参考訳): インテリジェントネットワーク制御のための時間一貫性グラフQ-Networks
- Authors: Zacharias Veiksaar, Maxime Bouton,
- Abstract要約: モバイルネットワークは複雑化を続けており、次世代ネットワークはトラフィックの増大とより多様なサービスの両方をサポートすることが期待されている。
モバイルネットワークの高レベル制御とオーケストレーションのための新しいマルチエージェント強化学習(MARL)アルゴリズムを提案する。
グラフニューラルネットワークは、グローバルな報酬関数を用いてトレーニングされ、グローバルなネットワーク状態の学習符号化に基づいて、調整されたローカルアクションを割り当てる。
- 参考スコア(独自算出の注目度): 0.2578242050187029
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Mobile networks continue to grow in complexity and next generation networks are expected to support both increasing traffic loads and more diverse services. As network complexity rises, optimizing antenna parameters under dynamic or changing objectives becomes increasingly challenging. We propose a novel multi-agent reinforcement learning (MARL) algorithm for high-level control and orchestration of mobile networks. The Temporally Consistent Graph Q-Network (TC-GQN) algorithm learns a self-predicting representation of the whole network that is task-independent and aggregates information from all base-stations. A graph neural network is trained using a global reward function to assign coordinated local actions based on the learned encoding of the global network state. We evaluate the algorithm in a simulated environment to orchestrate an energy-saving feature across multiple sectors and multiple carriers under different quality of service (QoS) constraints. The proposed algorithm outperforms state-of-the-art graph-based baselines and a competitive rule-based controller by improving hardware sleep time while maintaining QoS. Moreover, the learned representation enables rapid adaptation to changing intents.
- Abstract(参考訳): モバイルネットワークは複雑化を続けており、次世代ネットワークはトラフィックの増大とより多様なサービスの両方をサポートすることが期待されている。
ネットワークの複雑さが増大するにつれて、動的あるいは変化する目的の下でアンテナパラメータを最適化することがますます困難になる。
モバイルネットワークの高レベル制御とオーケストレーションのための新しいマルチエージェント強化学習(MARL)アルゴリズムを提案する。
The Temporally Consistent Graph Q-Network (TC-GQN) algorithm learns a self-predicting representation of the network that is a task-independent and aggregates information from all base-stations。
グラフニューラルネットワークは、グローバルな報酬関数を用いてトレーニングされ、グローバルなネットワーク状態の学習符号化に基づいて、調整されたローカルアクションを割り当てる。
本研究では,複数のセクターと複数のキャリアにまたがる省エネ機能を,異なる品質のサービス(QoS)制約下で編成するシミュレーション環境で評価する。
提案アルゴリズムは,QoSを維持しながらハードウェアの睡眠時間を改善することにより,最先端のグラフベースベースラインと競合ルールベースコントローラよりも優れる。
さらに、学習された表現は、変更意図への迅速な適応を可能にする。
関連論文リスト
- Generative AI-Driven Hierarchical Multi-Agent Framework for Zero-Touch Optical Networks [18.258341609669014]
我々は,ゼロタッチ光ネットワークにおけるマルチタスク自律実行の合理化を目的としたGenAI駆動型階層型マルチエージェントフレームワークを提案する。
光ネットワークのライフサイクルを通じて,3つの典型的なシナリオを実演するために,フィールド展開メッシュネットワークを利用する。
論文 参考訳(メタデータ) (2025-10-07T07:12:52Z) - Power Grid Control with Graph-Based Distributed Reinforcement Learning [60.49805771047161]
この作業は、リアルタイムでスケーラブルなグリッド管理のためのグラフベースの分散強化学習フレームワークを前進させる。
グラフニューラルネットワーク(GNN)を使用して、ネットワークのトポロジ情報を単一の低レベルエージェントの観測内にエンコードする。
Grid2Opシミュレーション環境での実験は、このアプローチの有効性を示している。
論文 参考訳(メタデータ) (2025-09-02T22:17:25Z) - Intelligent multicast routing method based on multi-agent deep
reinforcement learning in SDWN [4.521033397097599]
マルチキャスト通信技術は、デバイス密度の高い無線環境に広く応用されている。
本稿では,ソフトウェア定義無線ネットワーク(SDWN)環境におけるマルチエージェント深部強化学習(MADRL-MR)に基づく新しいマルチキャストルーティング手法を提案する。
シミュレーション実験により,MADRL-MRはスループット,遅延,パケット損失率などの観点から,既存のアルゴリズムよりも優れていることが示された。
論文 参考訳(メタデータ) (2023-05-12T14:05:03Z) - Multi-agent Reinforcement Learning with Graph Q-Networks for Antenna
Tuning [60.94661435297309]
モバイルネットワークの規模は、手作業による介入や手作業による戦略を使ってアンテナパラメータの最適化を困難にしている。
本研究では,モバイルネットワーク構成をグローバルに最適化するマルチエージェント強化学習アルゴリズムを提案する。
シミュレーション環境におけるアンテナ傾き調整問題とジョイント傾き・電力制御問題に対するアルゴリズムの性能を実証的に示す。
論文 参考訳(メタデータ) (2023-01-20T17:06:34Z) - Coordinated Reinforcement Learning for Optimizing Mobile Networks [6.924083445159127]
数百の協調エージェントを含む複雑なアプリケーションにおいて、協調グラフと強化学習の使い方を示す。
協調強化学習が他の手法より優れていることを実証的に示す。
論文 参考訳(メタデータ) (2021-09-30T14:46:18Z) - Better than the Best: Gradient-based Improper Reinforcement Learning for
Network Scheduling [60.48359567964899]
パケット遅延を最小限に抑えるため,制約付き待ち行列ネットワークにおけるスケジューリングの問題を考える。
我々は、利用可能な原子ポリシーよりも優れたスケジューラを生成するポリシー勾配に基づく強化学習アルゴリズムを使用する。
論文 参考訳(メタデータ) (2021-05-01T10:18:34Z) - Optimizing Large-Scale Fleet Management on a Road Network using
Multi-Agent Deep Reinforcement Learning with Graph Neural Network [0.8702432681310401]
本稿では,マルチエージェント強化学習とグラフニューラルネットワークを組み合わせることで,艦隊管理を最適化する新しい手法を提案する。
本研究では,実証タクシー呼出データをエミュレートした現実的なシミュレータを設計し,提案モデルの有効性を種々の条件で検証する。
論文 参考訳(メタデータ) (2020-11-12T03:01:37Z) - Dynamic Graph: Learning Instance-aware Connectivity for Neural Networks [78.65792427542672]
動的グラフネットワーク(DG-Net)は完全な有向非巡回グラフであり、ノードは畳み込みブロックを表し、エッジは接続経路を表す。
ネットワークの同じパスを使用する代わりに、DG-Netは各ノードの機能を動的に集約する。
論文 参考訳(メタデータ) (2020-10-02T16:50:26Z) - Network Adjustment: Channel Search Guided by FLOPs Utilization Ratio [101.84651388520584]
本稿では,ネットワークの精度をFLOPの関数として考慮した,ネットワーク調整という新しいフレームワークを提案する。
標準画像分類データセットと幅広いベースネットワークの実験は、我々のアプローチの有効性を実証している。
論文 参考訳(メタデータ) (2020-04-06T15:51:00Z) - Dynamic Hierarchical Mimicking Towards Consistent Optimization
Objectives [73.15276998621582]
一般化能力を高めたCNN訓練を推進するための汎用的特徴学習機構を提案する。
DSNに部分的にインスパイアされた私たちは、ニューラルネットワークの中間層から微妙に設計されたサイドブランチをフォークしました。
カテゴリ認識タスクとインスタンス認識タスクの両方の実験により,提案手法の大幅な改善が示された。
論文 参考訳(メタデータ) (2020-03-24T09:56:13Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。