論文の概要: Randomized-to-Canonical Model Predictive Control for Real-world Visual
Robotic Manipulation
- arxiv url: http://arxiv.org/abs/2207.01840v1
- Date: Tue, 5 Jul 2022 07:05:46 GMT
- ステータス: 処理完了
- システム内更新日: 2022-07-06 15:54:33.367311
- Title: Randomized-to-Canonical Model Predictive Control for Real-world Visual
Robotic Manipulation
- Title(参考訳): 実世界の視覚ロボット操作のためのランダム・カノニカルモデル予測制御
- Authors: Tomoya Yamanokuchi, Yuhwan Kwon, Yoshihisa Tsurumine, Eiji Uchibe, Jun
Morimoto, Takamitsu Matsubara
- Abstract要約: 我々はKRCモデル(Kalman Randomized-to-Canonical Model)と呼ばれる新しいモデル学習フレームワークを提案する。
このフレームワークは、ランダム化画像からタスク関連固有の特徴とそのダイナミクスを抽出することができる。
本手法の有効性は,シミュレーションと実世界の両方においてロボットハンドによる弁回転タスクと,シミュレーションにおけるブロック交配タスクによって評価される。
- 参考スコア(独自算出の注目度): 10.603179979421872
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Many works have recently explored Sim-to-real transferable visual model
predictive control (MPC). However, such works are limited to one-shot transfer,
where real-world data must be collected once to perform the sim-to-real
transfer, which remains a significant human effort in transferring the models
learned in simulations to new domains in the real world. To alleviate this
problem, we first propose a novel model-learning framework called Kalman
Randomized-to-Canonical Model (KRC-model). This framework is capable of
extracting task-relevant intrinsic features and their dynamics from randomized
images. We then propose Kalman Randomized-to-Canonical Model Predictive Control
(KRC-MPC) as a zero-shot sim-to-real transferable visual MPC using KRC-model.
The effectiveness of our method is evaluated through a valve rotation task by a
robot hand in both simulation and the real world, and a block mating task in
simulation. The experimental results show that KRC-MPC can be applied to
various real domains and tasks in a zero-shot manner.
- Abstract(参考訳): 多くの研究が最近sim-to-real transferable visual model prediction control (mpc)を研究している。
しかし、そのような作品は1ショットの転送に限られており、シミュレーションで学んだモデルを実世界の新しいドメインに転送するためには、シミュレーションから現実への転送を行うために、実世界のデータが一度収集されなければならない。
この問題を軽減するために,我々はまず,KRCモデル(Kalman Randomized-to-Canonical Model)と呼ばれる新しいモデル学習フレームワークを提案する。
このフレームワークは、ランダム画像からタスク関連固有の特徴とそのダイナミクスを抽出することができる。
そこで我々は,KRCモデルを用いたゼロショットシミュレート可能ビジュアルMPCとしてKRC-MPC(Kalman Randomized-to-Canonical Model Predictive Control)を提案する。
本手法の有効性は,シミュレーションと実世界の両方においてロボットハンドによる弁回転タスクと,シミュレーションにおけるブロック交配タスクによって評価される。
実験の結果,KRC-MPCは実領域やタスクにゼロショットで適用可能であることがわかった。
関連論文リスト
- DrEureka: Language Model Guided Sim-To-Real Transfer [64.14314476811806]
シミュレーションで学んだ政策を現実世界に伝達することは、ロボットのスキルを大規模に獲得する上で有望な戦略である。
本稿では,Large Language Models (LLMs) を用いてシム・トゥ・リアル設計の自動化と高速化を行う。
本手法では,ヨガボールの上を歩行する四足歩行や四足歩行など,新しいロボットタスクを解くことができる。
論文 参考訳(メタデータ) (2024-06-04T04:53:05Z) - ASID: Active Exploration for System Identification in Robotic Manipulation [32.27299045059514]
本稿では,少数の実世界のデータを活用して,シミュレーションモデルを自律的に洗練し,正確な制御戦略を立案する学習システムを提案する。
本研究は, ロボット操作作業における調音, 質量, その他の物理パラメータの同定における, このパラダイムの有効性を実証する。
論文 参考訳(メタデータ) (2024-04-18T16:35:38Z) - TWIST: Teacher-Student World Model Distillation for Efficient
Sim-to-Real Transfer [23.12048336150798]
本稿では,TWIST(Teacher-Student World Model Distillation for Sim-to-Real Transfer)を提案する。
具体的には、TWISTは状態観察をシミュレータから取得した特権情報として利用し、シミュレート・トゥ・リアル転送を著しく高速化する。
論文 参考訳(メタデータ) (2023-11-07T00:18:07Z) - Real-to-Sim: Predicting Residual Errors of Robotic Systems with Sparse
Data using a Learning-based Unscented Kalman Filter [65.93205328894608]
我々は,動的・シミュレータモデルと実ロボット間の残差を学習する。
学習した残差誤差により、動的モデル、シミュレーション、および実際のハードウェア間の現実的ギャップをさらに埋めることができることを示す。
論文 参考訳(メタデータ) (2022-09-07T15:15:12Z) - Nonprehensile Riemannian Motion Predictive Control [57.295751294224765]
本稿では,リアル・ツー・シムの報酬分析手法を導入し,リアルなロボット・プラットフォームに対する行動の可能性を確実に予測する。
連続的なアクション空間でオブジェクトを反応的にプッシュするクローズドループコントローラを作成します。
我々は,RMPCが乱雑な環境だけでなく,乱雑な環境においても頑健であり,ベースラインよりも優れていることを観察した。
論文 参考訳(メタデータ) (2021-11-15T18:50:04Z) - Cycle-Consistent World Models for Domain Independent Latent Imagination [0.0]
高いコストとリスクは、現実世界での自動運転車の訓練を困難にします。
本稿では,Cycleconsistent World Modelsと呼ばれる新しいモデルに基づく強化学習手法を提案する。
論文 参考訳(メタデータ) (2021-10-02T13:55:50Z) - KNODE-MPC: A Knowledge-based Data-driven Predictive Control Framework
for Aerial Robots [5.897728689802829]
我々は、知識に基づくニューラル常微分方程式(KNODE)というディープラーニングツールを用いて、第一原理から得られたモデルを拡張する。
得られたハイブリッドモデルは、名目上の第一原理モデルと、シミュレーションまたは実世界の実験データから学習したニューラルネットワークの両方を含む。
閉ループ性能を改善するため、ハイブリッドモデルはKNODE-MPCとして知られる新しいMPCフレームワークに統合される。
論文 参考訳(メタデータ) (2021-09-10T12:09:18Z) - Auto-Tuned Sim-to-Real Transfer [143.44593793640814]
シミュレーションで訓練されたポリシーは、しばしば現実世界に移されるときに失敗する。
ドメインのランダム化のようなこの問題に取り組む現在のアプローチには、事前の知識とエンジニアリングが必要である。
実世界に合わせてシミュレータシステムパラメータを自動的にチューニングする手法を提案する。
論文 参考訳(メタデータ) (2021-04-15T17:59:55Z) - Point Cloud Based Reinforcement Learning for Sim-to-Real and Partial
Observability in Visual Navigation [62.22058066456076]
強化学習(Reinforcement Learning, RL)は、複雑なロボットタスクを解決する強力なツールである。
RL は sim-to-real transfer problem として知られる現実世界では直接作用しない。
本稿では,点雲と環境ランダム化によって構築された観測空間を学習する手法を提案する。
論文 参考訳(メタデータ) (2020-07-27T17:46:59Z) - RL-CycleGAN: Reinforcement Learning Aware Simulation-To-Real [74.45688231140689]
本稿では、画像翻訳におけるRL-scene整合性損失を導入し、画像に関連付けられたQ値に対して変換操作が不変であることを保証する。
RL-CycleGANは実世界のシミュレーションから実世界への変換による強化学習のための新しい手法である。
論文 参考訳(メタデータ) (2020-06-16T08:58:07Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。