論文の概要: Cooperative Highway Work Zone Merge Control based on Reinforcement
Learning in A Connected and Automated Environment
- arxiv url: http://arxiv.org/abs/2001.08581v1
- Date: Tue, 21 Jan 2020 21:39:44 GMT
- ステータス: 処理完了
- システム内更新日: 2023-01-08 00:38:38.246700
- Title: Cooperative Highway Work Zone Merge Control based on Reinforcement
Learning in A Connected and Automated Environment
- Title(参考訳): 連系・自動化環境における強化学習に基づく協調型高速道路作業ゾーンマージ制御
- Authors: Tianzhu Ren, Yuanchang Xie, Liming Jiang
- Abstract要約: 本稿では,人工知能が実現した協調運転行動に基づく高速道路の作業ゾーン統合制御戦略を提案し,評価する。
提案手法は、全車両が完全に自動化され、接続され、協調していると仮定する。
その結果, この協調的RL型マージ制御は, 流動性と安全性の両面で, 後期マージや早期マージといった一般的な戦略を著しく上回っていることが明らかとなった。
- 参考スコア(独自算出の注目度): 6.402634424631123
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Given the aging infrastructure and the anticipated growing number of highway
work zones in the United States, it is important to investigate work zone merge
control, which is critical for improving work zone safety and capacity. This
paper proposes and evaluates a novel highway work zone merge control strategy
based on cooperative driving behavior enabled by artificial intelligence. The
proposed method assumes that all vehicles are fully automated, connected and
cooperative. It inserts two metering zones in the open lane to make space for
merging vehicles in the closed lane. In addition, each vehicle in the closed
lane learns how to optimally adjust its longitudinal position to find a safe
gap in the open lane using an off-policy soft actor critic (SAC) reinforcement
learning (RL) algorithm, considering the traffic conditions in its surrounding.
The learning results are captured in convolutional neural networks and used to
control individual vehicles in the testing phase. By adding the metering zones
and taking the locations, speeds, and accelerations of surrounding vehicles
into account, cooperation among vehicles is implicitly considered. This
RL-based model is trained and evaluated using a microscopic traffic simulator.
The results show that this cooperative RL-based merge control significantly
outperforms popular strategies such as late merge and early merge in terms of
both mobility and safety measures.
- Abstract(参考訳): 老朽化したインフラと、米国での高速道路の作業ゾーンの数の増加を考えると、作業ゾーンの安全性とキャパシティ向上に不可欠である作業ゾーンのマージ制御を調査することが重要である。
本稿では,人工知能による協調運転行動に基づく新しい高速道路作業ゾーン統合制御戦略を提案し,評価する。
提案手法は、全車両が完全に自動化され、接続され、協調していると仮定する。
オープンレーンに2つのメーターゾーンを挿入し、クローズドレーンで車両をマージするスペースを作る。
さらに、閉鎖車線の各車両は、周囲の交通状況を考慮して、オフポリシーソフトアクタ批評家(SAC)強化学習(RL)アルゴリズムを用いて、その長手位置を最適に調整してオープン車線内の安全な隙間を見つける方法を学習する。
学習結果は畳み込みニューラルネットワークでキャプチャされ、テストフェーズで個々の車両を制御するために使用される。
計測ゾーンを追加し、周囲の車両の位置、速度、加速度を考慮し、車両間の協調を暗黙的に考慮する。
このRLに基づくモデルは, 微視的交通シミュレータを用いて訓練し, 評価する。
その結果, この協調的RL型マージ制御は, 流動性と安全性の両面で, 後期マージや早期マージといった一般的な戦略を著しく上回ることがわかった。
関連論文リスト
- A Systematic Study of Multi-Agent Deep Reinforcement Learning for Safe and Robust Autonomous Highway Ramp Entry [0.0]
本研究では,車体前方移動動作を制御するハイウェイランプ機能について検討し,車体が進入する高速道路交通の流れとの衝突を最小限に抑える。
我々はこの問題に対してゲーム理論的マルチエージェント(MA)アプローチを採用し、深層強化学習(DRL)に基づくコントローラの利用について検討する。
本稿では,2台以上の車両(エージェント)の相互作用を研究することで既存の作業を拡張し,交通量やエゴカーを付加して道路シーンを体系的に拡張する。
論文 参考訳(メタデータ) (2024-11-21T21:23:46Z) - Towards Interactive and Learnable Cooperative Driving Automation: a Large Language Model-Driven Decision-Making Framework [79.088116316919]
コネクテッド・オートモービルズ(CAV)は世界中の道路試験を開始したが、複雑なシナリオにおける安全性と効率性はまだ十分ではない。
本稿では,対話型かつ学習可能なLLM駆動協調運転フレームワークCoDrivingLLMを提案する。
論文 参考訳(メタデータ) (2024-09-19T14:36:00Z) - A Conflicts-free, Speed-lossless KAN-based Reinforcement Learning Decision System for Interactive Driving in Roundabouts [17.434924472015812]
本稿では,ラウンドアバウンドにおける安全かつ効率的な運転行動を促進するための学習アルゴリズムを提案する。
提案アルゴリズムは、複雑なマルチサイクルラウンドアバウトにおける安全かつ効率的な運転戦略を学習するために、深層Q-ラーニングネットワークを用いる。
その結果,本システムは安定したトレーニングプロセスを維持しつつ,安全かつ効率的な運転を実現することができた。
論文 参考訳(メタデータ) (2024-08-15T16:10:25Z) - DenseLight: Efficient Control for Large-scale Traffic Signals with Dense
Feedback [109.84667902348498]
交通信号制御(TSC)は、道路網における車両の平均走行時間を短縮することを目的としている。
従来のTSC手法は、深い強化学習を利用して制御ポリシーを探索する。
DenseLightは、不偏報酬関数を用いてポリシーの有効性をフィードバックする新しいRTLベースのTSC手法である。
論文 参考訳(メタデータ) (2023-06-13T05:58:57Z) - Reinforcement Learning based Cyberattack Model for Adaptive Traffic
Signal Controller in Connected Transportation Systems [61.39400591328625]
接続輸送システムにおいて、適応交通信号制御装置(ATSC)は、車両から受信したリアルタイム車両軌跡データを利用して、グリーンタイムを規制する。
この無線接続されたATSCはサイバー攻撃面を増やし、その脆弱性を様々なサイバー攻撃モードに拡大する。
そのようなモードの1つは、攻撃者がネットワーク内で偽の車両を作成する「シビル」攻撃である。
RLエージェントは、シビル車噴射の最適速度を学習し、アプローチの混雑を生じさせるように訓練される
論文 参考訳(メタデータ) (2022-10-31T20:12:17Z) - COOPERNAUT: End-to-End Driving with Cooperative Perception for Networked
Vehicles [54.61668577827041]
本稿では,車間認識を用いたエンドツーエンド学習モデルであるCOOPERNAUTを紹介する。
われわれのAutoCastSim実験は、我々の協調知覚駆動モデルが平均成功率を40%向上させることを示唆している。
論文 参考訳(メタデータ) (2022-05-04T17:55:12Z) - Real-time Cooperative Vehicle Coordination at Unsignalized Road
Intersections [7.860567520771493]
信号のない道路交差点での協調作業は、連結車両と自動車両の安全運転交通スループットを向上させることを目的としている。
我々はモデルフリーなマルコフ決定プロセス(MDP)を導入し、深層強化学習フレームワークにおける双遅延Deep Deterministic Policy(TD3)に基づく戦略によりそれに取り組む。
提案手法は, 準定常調整シナリオにおいて, ほぼ最適性能を達成し, 現実的な連続流れの制御を大幅に改善できることが示唆された。
論文 参考訳(メタデータ) (2022-05-03T02:56:02Z) - Decentralized Cooperative Lane Changing at Freeway Weaving Areas Using
Multi-Agent Deep Reinforcement Learning [1.6752182911522522]
マージやウィービングエリアなどの高速道路ボトルネックにおける渋滞時の車線変化は、さらに道路の容量を減少させる。
ディープ・リテンション・ラーニング(RL)とコネクテッド・アンド・オートマチック・カー・テクノロジーの出現は、協調車線変更による高速道路のボトルネックにおけるモビリティとエネルギー効率を改善するための解決策となる。
本研究では,多エージェント深部RLパラダイムを用いた分散協調車線切替制御器を開発した。
本研究では, 交通量, 車両速度, 車両当たりの停止数, 燃料効率, 排出エミッションの観点から, 多エージェント深部RLによる協調車線変更は, 運転者にとって優れた性能を示すことを示した。
論文 参考訳(メタデータ) (2021-10-05T18:29:13Z) - End-to-End Intersection Handling using Multi-Agent Deep Reinforcement
Learning [63.56464608571663]
交差点をナビゲートすることは、自動運転車にとって大きな課題の1つです。
本研究では,交通標識のみが提供された交差点をナビゲート可能なシステムの実装に着目する。
本研究では,時間ステップ毎に加速度と操舵角を予測するためのニューラルネットワークの訓練に用いる,モデルフリーの連続学習アルゴリズムを用いたマルチエージェントシステムを提案する。
論文 参考訳(メタデータ) (2021-04-28T07:54:40Z) - Vehicular Cooperative Perception Through Action Branching and Federated
Reinforcement Learning [101.64598586454571]
強化学習に基づく車両関連、リソースブロック(RB)割り当て、協調認識メッセージ(CPM)のコンテンツ選択を可能にする新しいフレームワークが提案されている。
車両全体のトレーニングプロセスをスピードアップするために、フェデレーションRLアプローチが導入されます。
その結果、フェデレーションRLはトレーニングプロセスを改善し、非フェデレーションアプローチと同じ時間内により良いポリシーを達成できることが示された。
論文 参考訳(メタデータ) (2020-12-07T02:09:15Z) - A Multi-intersection Vehicular Cooperative Control based on
End-Edge-Cloud Computing [25.05518638792962]
複数の交差点を有する広いエリアにおける車両間の協調を可能にするために,多断面車両協調制御(MiVeCC)を提案する。
まず、車両間のエッジクラウド垂直協調と水平協調を容易にするために、車両用エンドエッジクラウドコンピューティングフレームワークを提案する。
高密度トラフィックに対処するため, 車両選択法を提案し, 性能劣化を伴わずに, 状態空間を小さくし, アルゴリズムの収束を加速する。
論文 参考訳(メタデータ) (2020-12-01T14:15:14Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。