論文の概要: A Framework for Studying Reinforcement Learning and Sim-to-Real in Robot
Soccer
- arxiv url: http://arxiv.org/abs/2008.12624v1
- Date: Tue, 18 Aug 2020 23:52:32 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-27 21:14:47.241500
- Title: A Framework for Studying Reinforcement Learning and Sim-to-Real in Robot
Soccer
- Title(参考訳): ロボットサッカーにおける強化学習と即時学習の枠組み
- Authors: Hansenclever F. Bassani, Renie A. Delgado, Jos\'e Nilton de O. Lima
Junior, Heitor R. Medeiros, Pedro H. M. Braga, Mateus G. Machado, Lucas H. C.
Santos and Alain Tapp
- Abstract要約: 本稿では,ロボットサッカーにおける強化学習(Reinforcement Learning, RL)とsim-to-realを研究するための,VSSS-RLと呼ばれるオープンフレームワークを紹介する。
本研究では,サッカーエージェントの完全な動作を制御するために,連続的あるいは離散的な制御ポリシーを訓練できるシミュレーション環境を提案する。
本研究の結果から,手作り制御政策の実施が困難な行動の幅広いレパートリーを学習したことが示唆された。
- 参考スコア(独自算出の注目度): 1.1785354380793065
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: This article introduces an open framework, called VSSS-RL, for studying
Reinforcement Learning (RL) and sim-to-real in robot soccer, focusing on the
IEEE Very Small Size Soccer (VSSS) league. We propose a simulated environment
in which continuous or discrete control policies can be trained to control the
complete behavior of soccer agents and a sim-to-real method based on domain
adaptation to adapt the obtained policies to real robots. Our results show that
the trained policies learned a broad repertoire of behaviors that are difficult
to implement with handcrafted control policies. With VSSS-RL, we were able to
beat human-designed policies in the 2019 Latin American Robotics Competition
(LARC), achieving 4th place out of 21 teams, being the first to apply
Reinforcement Learning (RL) successfully in this competition. Both environment
and hardware specifications are available open-source to allow reproducibility
of our results and further studies.
- Abstract(参考訳): 本稿では,ロボットサッカーにおけるReinforcement Learning (RL)とsim-to-realを研究するためのオープンフレームワークであるVSSS-RLを紹介し,IEEE Very Small Size Soccer (VSSS) リーグに着目した。
サッカーエージェントの完全な行動を制御するために,連続的あるいは離散的な制御ポリシーを訓練できるシミュレーション環境と,得られたポリシーを実際のロボットに適用するためのドメイン適応に基づくsim-to-real手法を提案する。
本研究の結果から,手作り制御政策の実施が困難な行動の幅広いレパートリーを学習したことが示唆された。
vsss-rlでは、2019年のラテン・アメリカン・ロボティクス・コンペティション(larc)で、人間設計のポリシーを破ることができ、21チーム中4位を獲得し、このコンペティションで最初に強化学習(rl)を適用した。
環境仕様とハードウェア仕様の両方がオープンソースで公開されており、その結果の再現性とさらなる研究を可能にする。
関連論文リスト
- Robot Air Hockey: A Manipulation Testbed for Robot Learning with Reinforcement Learning [34.055177769808914]
本稿では,ロボットエアホッケーに基づく動的対話型RLテストベッドを提案する。
我々のテストベッドは、RL能力の様々な評価を可能にします。
ロボットのエアホッケーテストベッドは、3つのドメインでシミュレート・トゥ・リアル・トランスファーをサポートする。
論文 参考訳(メタデータ) (2024-05-06T02:13:08Z) - SERL: A Software Suite for Sample-Efficient Robotic Reinforcement
Learning [85.21378553454672]
筆者らは,報酬の計算と環境のリセットを行う手法とともに,効率的なオフ・ポリティクス・ディープ・RL法を含むライブラリを開発した。
我々は,PCBボードアセンブリ,ケーブルルーティング,オブジェクトの移動に関するポリシを,非常に効率的な学習を実現することができることを発見した。
これらの政策は完全な成功率またはほぼ完全な成功率、摂動下でさえ極端な堅牢性を実現し、突発的な堅牢性回復と修正行動を示す。
論文 参考訳(メタデータ) (2024-01-29T10:01:10Z) - Grow Your Limits: Continuous Improvement with Real-World RL for Robotic
Locomotion [66.69666636971922]
本稿では,ロボットの学習過程における探索を調節するポリシー正規化フレームワークであるAPRLを提案する。
APRLは四足歩行ロボットを、数分で完全に現実世界を歩けるように効率よく学習する。
論文 参考訳(メタデータ) (2023-10-26T17:51:46Z) - DeXtreme: Transfer of Agile In-hand Manipulation from Simulation to
Reality [64.51295032956118]
我々は人型ロボットの手で頑健な操作を行える政策を訓練する。
本研究は,各種ハードウェアおよびシミュレータのデクスタラス操作におけるsim-to-real転送の可能性を再確認する。
論文 参考訳(メタデータ) (2022-10-25T01:51:36Z) - How does AI play football? An analysis of RL and real-world football
strategies [2.1628586087680075]
強化学習(RL)により、幅広い応用に優れた高度なエージェントの開発が可能になった。
サッカーRLエージェントのプレイスタイル特性について検討し、トレーニング中に戦略がどのように発展するかを明らかにする。
学習した戦略は、実際のサッカー選手の戦略と比較される。
論文 参考訳(メタデータ) (2021-11-24T08:44:23Z) - Scenic4RL: Programmatic Modeling and Generation of Reinforcement
Learning Environments [89.04823188871906]
リアルタイム戦略(RTS)環境では,多様な現実シナリオの生成が難しい。
既存のシミュレータのほとんどは環境をランダムに生成することに頼っている。
我々は、研究者を支援するために、既存の形式シナリオ仕様言語であるSCENICを採用する利点を紹介する。
論文 参考訳(メタデータ) (2021-06-18T21:49:46Z) - rSoccer: A Framework for Studying Reinforcement Learning in Small and
Very Small Size Robot Soccer [0.0]
本稿では,強化学習実験に最適化されたIEEE Very Small Size SoccerとSmall Size Leagueのオープンソースシミュレータを紹介する。
また,単一エージェントおよびマルチエージェントロボットサッカースキルを評価するためのベンチマークタスクのセットを用いて,OpenAI Gym環境を作成するためのフレームワークを提案する。
論文 参考訳(メタデータ) (2021-06-15T01:30:21Z) - How to Train Your Robot with Deep Reinforcement Learning; Lessons We've
Learned [111.06812202454364]
本稿では,ロボット深部RLのケーススタディをいくつか紹介する。
深部RLにおける一般的な課題と,それらの課題について論じる。
また、他の卓越した課題についても概説し、その多くが現実世界のロボティクスの設定に特有のものである。
論文 参考訳(メタデータ) (2021-02-04T22:09:28Z) - Learning to Play Table Tennis From Scratch using Muscular Robots [34.34824536814943]
この研究は、(a)人為的ロボットアームを用いた安全クリティカルな動的タスクを初めて学習し、(b)PAM駆動システムで精度の高い要求問題を学び、(c)本物のボールなしで卓球をするようにロボットを訓練する。
ビデオとデータセットは muscleTT.embodied.ml で入手できる。
論文 参考訳(メタデータ) (2020-06-10T16:43:27Z) - Meta-Reinforcement Learning for Robotic Industrial Insertion Tasks [70.56451186797436]
本研究では,メタ強化学習を用いてシミュレーションの課題の大部分を解決する方法について検討する。
エージェントを訓練して現実の挿入タスクを成功させる手法を実証する。
論文 参考訳(メタデータ) (2020-04-29T18:00:22Z) - Learning to Play Soccer by Reinforcement and Applying Sim-to-Real to
Compete in the Real World [1.3114165111679479]
本研究は, IEEE Very Small Size Soccer (VSSS) における実サッカーロボットの完全制御のための強化学習(RL)の適用性を示す。
VSSSリーグでは、3つの小さなロボットの2つのチームが互いに対戦します。
本研究では、連続的または離散的な制御ポリシーを訓練できるシミュレーション環境と、得られたポリシーを用いて現実世界のロボットを制御できるようにするSim-to-Real法を提案する。
論文 参考訳(メタデータ) (2020-03-24T20:23:18Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。