論文の概要: Know Thyself: Transferable Visuomotor Control Through Robot-Awareness
- arxiv url: http://arxiv.org/abs/2107.09047v1
- Date: Mon, 19 Jul 2021 17:56:04 GMT
- ステータス: 処理完了
- システム内更新日: 2021-07-20 16:02:48.352274
- Title: Know Thyself: Transferable Visuomotor Control Through Robot-Awareness
- Title(参考訳): ロボット認識による移動可能な視覚運動制御
- Authors: Edward S. Hu, Kun Huang, Oleh Rybkin, Dinesh Jayaraman
- Abstract要約: 新しいロボットをスクラッチからトレーニングするためには、通常大量のロボット固有のデータを生成する必要がある。
簡単なロボット「自己認識」を活用する「ロボット認識」ソリューションパラダイムを提案する。
シミュレーションおよび実際のロボットにおけるテーブルトップ操作に関する実験により、これらのプラグインの改善により、ビジュモータコントローラの転送性が劇的に向上することを示した。
- 参考スコア(独自算出の注目度): 22.405839096833937
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Training visuomotor robot controllers from scratch on a new robot typically
requires generating large amounts of robot-specific data. Could we leverage
data previously collected on another robot to reduce or even completely remove
this need for robot-specific data? We propose a "robot-aware" solution paradigm
that exploits readily available robot "self-knowledge" such as proprioception,
kinematics, and camera calibration to achieve this. First, we learn modular
dynamics models that pair a transferable, robot-agnostic world dynamics module
with a robot-specific, analytical robot dynamics module. Next, we set up visual
planning costs that draw a distinction between the robot self and the world.
Our experiments on tabletop manipulation tasks in simulation and on real robots
demonstrate that these plug-in improvements dramatically boost the
transferability of visuomotor controllers, even permitting zero-shot transfer
onto new robots for the very first time. Project website:
https://hueds.github.io/rac/
- Abstract(参考訳): 新しいロボットをスクラッチからトレーニングするには、通常大量のロボット固有のデータを生成する必要がある。
以前他のロボットで収集したデータを活用して、ロボット固有のデータの必要性を減らしたり、完全に取り除いたりできますか?
そこで本研究では,プロピオセプションやキネマティクス,カメラキャリブレーションといった,手軽に利用可能なロボット「知識」を活用した「ロボット認識」ソリューションパラダイムを提案する。
まず, 移動可能でロボットに依存しないworld dynamicsモジュールと, ロボット固有の解析ロボットダイナミクスモジュールを組み合わせるモジュラーダイナミクスモデルを学ぶ。
次に,ロボットの自己と世界を区別する視覚的計画コストを設定した。
シミュレーションおよび実際のロボットにおけるテーブルトップ操作タスクの実験では、これらのプラグインの改善により、ビジュモータコントローラの転送性が劇的に向上し、新規ロボットへのゼロショット転送が可能になった。
プロジェクトウェブサイト: https://hueds.github.io/rac/
関連論文リスト
- Know your limits! Optimize the robot's behavior through self-awareness [11.021217430606042]
最近の人間ロボット模倣アルゴリズムは、高精度な人間の動きを追従することに焦点を当てている。
本稿では,ロボットが参照を模倣する際の動作を予測できるディープラーニングモデルを提案する。
我々のSAW(Self-AWare Model)は、転倒確率、基準運動への固執、滑らかさといった様々な基準に基づいて、潜在的なロボットの挙動をランク付けする。
論文 参考訳(メタデータ) (2024-09-16T14:14:58Z) - Unifying 3D Representation and Control of Diverse Robots with a Single Camera [48.279199537720714]
我々は,ロボットを視覚のみからモデル化し,制御することを自律的に学習するアーキテクチャであるNeural Jacobian Fieldsを紹介する。
提案手法は,正確なクローズドループ制御を実現し,各ロボットの因果動的構造を復元する。
論文 参考訳(メタデータ) (2024-07-11T17:55:49Z) - Giving Robots a Hand: Learning Generalizable Manipulation with
Eye-in-Hand Human Video Demonstrations [66.47064743686953]
眼内カメラは、視覚に基づくロボット操作において、より優れたサンプル効率と一般化を可能にすることを約束している。
一方、人間がタスクを行うビデオは、ロボット遠隔操作の専門知識を欠いているため、収集コストがずっと安い。
本研究では,広範にラベルのない人間ビデオによるロボット模倣データセットを拡張し,眼球運動ポリシーの一般化を大幅に促進する。
論文 参考訳(メタデータ) (2023-07-12T07:04:53Z) - Robot Learning with Sensorimotor Pre-training [98.7755895548928]
ロボット工学のための自己教師型感覚運動器事前学習手法を提案する。
我々のモデルはRTTと呼ばれ、センサモレータトークンのシーケンスで動作するトランスフォーマーである。
感覚運動の事前学習は、ゼロからトレーニングを一貫して上回り、優れたスケーリング特性を持ち、さまざまなタスク、環境、ロボット間での移動を可能にしている。
論文 参考訳(メタデータ) (2023-06-16T17:58:10Z) - Open-World Object Manipulation using Pre-trained Vision-Language Models [72.87306011500084]
ロボットが人からの指示に従うためには、人間の語彙の豊かな意味情報を繋げなければならない。
我々は、事前学習された視覚言語モデルを利用して、オブジェクト識別情報を抽出するシンプルなアプローチを開発する。
実際の移動マニピュレータにおける様々な実験において、MOOはゼロショットを様々な新しいオブジェクトカテゴリや環境に一般化する。
論文 参考訳(メタデータ) (2023-03-02T01:55:10Z) - GenLoco: Generalized Locomotion Controllers for Quadrupedal Robots [87.32145104894754]
四足歩行ロボットのための汎用ロコモーション(GenLoco)コントローラを訓練するためのフレームワークを提案する。
本フレームワークは,多種多様な四足歩行ロボットに展開可能な汎用ロコモーションコントローラを合成する。
我々のモデルは、より一般的な制御戦略を取得し、新しいシミュレーションロボットや実世界のロボットに直接移行できることを示す。
論文 参考訳(メタデータ) (2022-09-12T15:14:32Z) - Robotic Telekinesis: Learning a Robotic Hand Imitator by Watching Humans
on Youtube [24.530131506065164]
我々は、人間なら誰でもロボットの手と腕を制御できるシステムを構築します。
ロボットは、人間のオペレーターを1台のRGBカメラで観察し、その動作をリアルタイムで模倣する。
我々はこのデータを利用して、人間の手を理解するシステムを訓練し、人間のビデオストリームをスムーズで、素早く、安全に、意味論的に誘導デモに類似したロボットのハンドアーム軌道に再ターゲティングする。
論文 参考訳(メタデータ) (2022-02-21T18:59:59Z) - REvolveR: Continuous Evolutionary Models for Robot-to-robot Policy
Transfer [57.045140028275036]
本研究では,運動学や形態学など,異なるパラメータを持つ2つの異なるロボット間でポリシーを伝達する問題を考察する。
模倣学習手法を含む動作や状態遷移の分布を一致させることで、新しいポリシーを訓練する既存のアプローチは、最適な動作や/または状態分布が異なるロボットでミスマッチしているために失敗する。
本稿では,物理シミュレータに実装されたロボット政策伝達に連続的進化モデルを用いることで,$RevolveR$という新しい手法を提案する。
論文 参考訳(メタデータ) (2022-02-10T18:50:25Z) - Learning Locomotion Skills in Evolvable Robots [10.167123492952694]
本稿では,任意の形状のモジュール型ロボットが目標に向かって歩いたり,移動した場合にこの目標に従うことを学習できるようにするための,コントローラアーキテクチャと汎用学習手法を提案する。
我々のアプローチは、現実世界の3つのシナリオにおいて、クモ、ヤモリ、そしてその子孫の3つのロボットに対して検証されている。
論文 参考訳(メタデータ) (2020-10-19T14:01:50Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。