論文の概要: Autonomous Warehouse Robot using Deep Q-Learning
- arxiv url: http://arxiv.org/abs/2202.10019v1
- Date: Mon, 21 Feb 2022 07:16:51 GMT
- ステータス: 処理完了
- システム内更新日: 2022-02-23 08:15:55.003807
- Title: Autonomous Warehouse Robot using Deep Q-Learning
- Title(参考訳): 深層q学習を用いた自律倉庫ロボット
- Authors: Ismot Sadik Peyas, Zahid Hasan, Md. Rafat Rahman Tushar, Al Musabbir,
Raisa Mehjabin Azni, Shahnewaz Siddique
- Abstract要約: 倉庫では、特殊エージェントがナビゲートし、障害物を避け、空間の使用を最大化する必要がある。
本稿では,ロボットナビゲーションと障害物回避問題に対処するために,Deep Reinforcement Learning (DRL) を提案する。
マルチエージェントQ-ラーニングの実行には,Q-tableの戦略的なバリエーションを用いる。
- 参考スコア(独自算出の注目度): 0.5138012450471438
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: In warehouses, specialized agents need to navigate, avoid obstacles and
maximize the use of space in the warehouse environment. Due to the
unpredictability of these environments, reinforcement learning approaches can
be applied to complete these tasks. In this paper, we propose using Deep
Reinforcement Learning (DRL) to address the robot navigation and obstacle
avoidance problem and traditional Q-learning with minor variations to maximize
the use of space for product placement. We first investigate the problem for
the single robot case. Next, based on the single robot model, we extend our
system to the multi-robot case. We use a strategic variation of Q-tables to
perform multi-agent Q-learning. We successfully test the performance of our
model in a 2D simulation environment for both the single and multi-robot cases.
- Abstract(参考訳): 倉庫では、専門のエージェントが移動し、障害物を避け、倉庫環境における空間の使用を最大化する必要がある。
これらの環境が予測不可能であるため、これらのタスクを完了させるために強化学習アプローチが適用できる。
本稿では,ロボットのナビゲーションや障害物回避問題に対処するためにdrl(deep reinforcement learning)と,製品配置のための空間の利用を最大化するために,従来型q-learningを提案する。
まず,単一ロボットケースの問題点について検討する。
次に、単一ロボットモデルに基づいて、システムをマルチロボットケースに拡張する。
マルチエージェントQ-ラーニングの実行には,Q-tableの戦略的バリエーションを用いる。
単一ロボットと複数ロボットの両方を対象とした2次元シミュレーション環境でのモデル性能の検証に成功しました。
関連論文リスト
- Robotic warehousing operations: a learn-then-optimize approach to large-scale neighborhood search [84.39855372157616]
本稿では,ワークステーションの注文処理,アイテムポッドの割り当て,ワークステーションでの注文処理のスケジュールを最適化することで,ウェアハウジングにおけるロボット部品対ピッカー操作を支援する。
そこで我々は, 大規模近傍探索を用いて, サブプロブレム生成に対する学習を最適化する手法を提案する。
Amazon Roboticsと共同で、我々のモデルとアルゴリズムは、最先端のアプローチよりも、実用的な問題に対するより強力なソリューションを生み出していることを示す。
論文 参考訳(メタデータ) (2024-08-29T20:22:22Z) - Commonsense Reasoning for Legged Robot Adaptation with Vision-Language Models [81.55156507635286]
脚のついたロボットは、様々な環境をナビゲートし、幅広い障害を克服することができる。
現在の学習手法は、人間の監督を伴わずに、予期せぬ状況の長い尾への一般化に苦慮することが多い。
本稿では,VLM-Predictive Control (VLM-PC) というシステムを提案する。
論文 参考訳(メタデータ) (2024-07-02T21:00:30Z) - Active Exploration in Bayesian Model-based Reinforcement Learning for Robot Manipulation [8.940998315746684]
ロボットアームのエンドタスクに対するモデルベース強化学習(RL)アプローチを提案する。
我々はベイズニューラルネットワークモデルを用いて、探索中に動的モデルに符号化された信念と情報の両方を確率論的に表現する。
実験により,ベイズモデルに基づくRL手法の利点が示された。
論文 参考訳(メタデータ) (2024-04-02T11:44:37Z) - Toward General-Purpose Robots via Foundation Models: A Survey and Meta-Analysis [82.59451639072073]
汎用ロボットはどんな環境でも、どんな物体でもシームレスに動作し、様々なスキルを使って様々なタスクをこなす。
コミュニティとしては、特定のタスク用に設計し、特定のデータセットでトレーニングし、特定の環境にデプロイすることで、ほとんどのロボットシステムを制約してきました。
ウェブスケールで大規模で大容量の事前学習型モデルの優れたオープンセット性能とコンテンツ生成能力に感銘を受けて,本調査は,汎用ロボティクスに基礎モデルを適用する方法について検討した。
論文 参考訳(メタデータ) (2023-12-14T10:02:55Z) - RoboGen: Towards Unleashing Infinite Data for Automated Robot Learning via Generative Simulation [68.70755196744533]
RoboGenはジェネレーティブなロボットエージェントで、ジェネレーティブなシミュレーションを通じて、さまざまなロボットのスキルを自動的に学習する。
我々の研究は、大規模モデルに埋め込まれた広範囲で多目的な知識を抽出し、それらをロボット工学の分野に移す試みである。
論文 参考訳(メタデータ) (2023-11-02T17:59:21Z) - Decentralized Multi-Robot Formation Control Using Reinforcement Learning [2.7716102039510564]
本稿では,小人数のSpheroロボット群に適用した強化学習(RL)アルゴリズムに基づく,分散型リーダフォロワマルチロボット生成制御を提案する。
システム動作を向上させるため,我々は2つの異なるDDQNモデルを訓練した。
提案手法は, 複雑な数学的モデルや非線形制御法則を必要とせずに, マルチロボットシステムが安定な構成を実現し, 維持可能であることを示すシミュレーションおよび実実験で検証されている。
論文 参考訳(メタデータ) (2023-06-26T08:02:55Z) - Domain Randomization for Robust, Affordable and Effective Closed-loop
Control of Soft Robots [10.977130974626668]
ソフトロボットは、コンタクトや適応性に対する本質的な安全性によって人気を集めている。
本稿では、ソフトロボットのRLポリシーを強化することにより、ドメインランダム化(DR)がこの問題を解決する方法を示す。
本稿では,変形可能なオブジェクトに対する動的パラメータの自動推論のための,従来の適応的領域ランダム化手法に対する新しいアルゴリズム拡張を提案する。
論文 参考訳(メタデータ) (2023-03-07T18:50:00Z) - Bi-Manual Manipulation and Attachment via Sim-to-Real Reinforcement
Learning [23.164743388342803]
シミュレーションで訓練された強化学習を用いて,両手作業の解法について検討する。
また、RLポリシーの効果的なトレーニングにつながるシミュレーション環境の変更についても検討する。
本研究では,2つのロボットアームが磁気的接続点を持つ2つのブロックを拾い上げるための接続タスクを設計する。
論文 参考訳(メタデータ) (2022-03-15T21:49:20Z) - Lifelong Robotic Reinforcement Learning by Retaining Experiences [61.79346922421323]
多くのマルチタスク強化学習は、ロボットが常にすべてのタスクからデータを収集できると仮定している。
本研究では,物理ロボットシステムの実用的制約を動機として,現実的なマルチタスクRL問題について検討する。
我々は、ロボットのスキルセットを累積的に成長させるために、過去のタスクで学んだデータとポリシーを効果的に活用するアプローチを導出する。
論文 参考訳(メタデータ) (2021-09-19T18:00:51Z) - Large Scale Distributed Collaborative Unlabeled Motion Planning with
Graph Policy Gradients [122.85280150421175]
本研究では,運動制約と空間制約を多数のロボットに対して2次元空間で解くための学習法を提案する。
ロボットのポリシーをパラメータ化するためにグラフニューラルネットワーク(GNN)を用いる。
論文 参考訳(メタデータ) (2021-02-11T21:57:43Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。