論文の概要: Economical Precise Manipulation and Auto Eye-Hand Coordination with
Binocular Visual Reinforcement Learning
- arxiv url: http://arxiv.org/abs/2205.05963v1
- Date: Thu, 12 May 2022 09:01:29 GMT
- ステータス: 処理完了
- システム内更新日: 2022-05-13 13:05:57.861577
- Title: Economical Precise Manipulation and Auto Eye-Hand Coordination with
Binocular Visual Reinforcement Learning
- Title(参考訳): 両眼視覚強化学習による経済的精密操作と自己眼球協調
- Authors: Yiwen Chen, Sheng Guo, Lei Zhou, Xian Yao Ng, Marcelo H. Ang Jr
- Abstract要約: 本研究は、未知のアイハンド調整に焦点をあて、アイ・イン・ハンド・カメラのキャリブレーションを自動で行う様々な方法を提案する。
提案手法は4つのタスクに対して最小限のコストで競争的に良い結果を得る。
- 参考スコア(独自算出の注目度): 12.577339793821471
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Precision robotic manipulation tasks (insertion, screwing, precisely pick,
precisely place) are required in many scenarios. Previous methods achieved good
performance on such manipulation tasks. However, such methods typically require
tedious calibration or expensive sensors. 3D/RGB-D cameras and torque/force
sensors add to the cost of the robotic application and may not always be
economical. In this work, we aim to solve these but using only weak-calibrated
and low-cost webcams. We propose Binocular Alignment Learning (BAL), which
could automatically learn the eye-hand coordination and points alignment
capabilities to solve the four tasks. Our work focuses on working with unknown
eye-hand coordination and proposes different ways of performing eye-in-hand
camera calibration automatically. The algorithm was trained in simulation and
used a practical pipeline to achieve sim2real and test it on the real robot.
Our method achieves a competitively good result with minimal cost on the four
tasks.
- Abstract(参考訳): 多くのシナリオでは、精密なロボット操作タスク(挿入、ねじ、正確に選択)が必須である。
従来手法はこのような操作タスクで優れた性能を達成していた。
しかし、このような方法は通常は面倒なキャリブレーションや高価なセンサーを必要とする。
3D/RGB-Dカメラとトルク/フォースセンサーはロボットアプリケーションのコストを増し、必ずしも経済的ではないかもしれない。
本研究では,弱いキャリブレーションと低コストのウェブカメラのみを用いて,これらの問題を解決することを目的とする。
両眼アライメント学習(BAL)を提案し,眼の協調とポイントアライメント機能を自動的に学習して4つの課題を解決する。
本研究は未知の眼球運動に焦点をあて,眼球運動の自動キャリブレーション手法を提案する。
このアルゴリズムはシミュレーションで訓練され、実用的なパイプラインを使ってsim2realを実現し、実際のロボットでテストした。
提案手法は,4つのタスクに最小限のコストで,競争力に優れた結果が得られる。
関連論文リスト
- Kalib: Markerless Hand-Eye Calibration with Keypoint Tracking [52.4190876409222]
ハンドアイキャリブレーションでは、カメラとロボット間の変換を推定する。
ディープラーニングの最近の進歩は、マーカーレス技術を提供するが、それらは課題を提示している。
自動的かつ普遍的なマーカーレスハンドアイキャリブレーションパイプラインであるKalibを提案する。
論文 参考訳(メタデータ) (2024-08-20T06:03:40Z) - Offline Imitation Learning Through Graph Search and Retrieval [57.57306578140857]
模倣学習は、ロボットが操作スキルを取得するための強力な機械学習アルゴリズムである。
本稿では,グラフ検索と検索により,最適下実験から学習する,シンプルで効果的なアルゴリズムGSRを提案する。
GSRは、ベースラインに比べて10%から30%高い成功率、30%以上の熟練を達成できる。
論文 参考訳(メタデータ) (2024-07-22T06:12:21Z) - Multi-Camera Hand-Eye Calibration for Human-Robot Collaboration in Industrial Robotic Workcells [3.76054468268713]
産業シナリオでは、人間とロボットの効果的なコラボレーションは、人間のオペレーターをしっかりと監視するマルチカメラシステムに依存している。
本稿では,ロボットのベースとカメラの双方に対して,それぞれのカメラのポーズを最適化する,革新的で堅牢なマルチカメラハンドアイキャリブレーション手法を提案する。
産業シナリオで収集したMETRICデータセットと実世界のデータを用いた包括的実験により,本手法の優れた性能を示す。
論文 参考訳(メタデータ) (2024-06-17T10:23:30Z) - Robot Hand-Eye Calibration using Structure-from-Motion [9.64487611393378]
そこで本研究では,手眼の校正のためのフレキシブルな手法を提案する。
この解は線形形式で得られることを示す。
提案手法を既存手法と比較し,その有効性を検証した実験を多数実施する。
論文 参考訳(メタデータ) (2023-11-20T14:41:44Z) - EasyHeC: Accurate and Automatic Hand-eye Calibration via Differentiable
Rendering and Space Exploration [49.90228618894857]
我々は、マーカーレスでホワイトボックスであり、より優れた精度とロバスト性を提供するEasyHeCと呼ばれる手眼校正の新しいアプローチを導入する。
我々は,2つの重要な技術 – レンダリングベースのカメラポーズの最適化と整合性に基づく共同空間探索 – を利用することを提案する。
本評価は,合成および実世界のデータセットにおいて優れた性能を示す。
論文 参考訳(メタデータ) (2023-05-02T03:49:54Z) - Learning Fine-Grained Bimanual Manipulation with Low-Cost Hardware [132.39281056124312]
ケーブル接続のスレッディングやバッテリーのスロットングといった細かい操作は、ロボットにとって非常に難しい。
本稿では,実演からエンド・ツー・エンドの模倣学習を行う低コストシステムを提案する。
本研究では, 動作系列の生成モデルを学習する, 単純だが斬新なアルゴリズムであるAction Chunking with Transformersを開発した。
論文 参考訳(メタデータ) (2023-04-23T19:10:53Z) - Markerless Camera-to-Robot Pose Estimation via Self-supervised
Sim-to-Real Transfer [26.21320177775571]
本稿では,オンラインカメラ・ロボット・キャリブレーションと自己監督型トレーニング手法を備えたエンドツーエンドのポーズ推定フレームワークを提案する。
我々のフレームワークはロボットのポーズを解くための深層学習と幾何学的ビジョンを組み合わせており、パイプラインは完全に微分可能である。
論文 参考訳(メタデータ) (2023-02-28T05:55:42Z) - Leveraging Sequentiality in Reinforcement Learning from a Single
Demonstration [68.94506047556412]
本稿では,複雑なロボットタスクの制御ポリシーを1つの実演で学習するために,シーケンシャルなバイアスを活用することを提案する。
本研究は, ヒューマノイド移動やスタンドアップなど, 模擬課題のいくつかを, 前例のないサンプル効率で解くことができることを示す。
論文 参考訳(メタデータ) (2022-11-09T10:28:40Z) - Lasers to Events: Automatic Extrinsic Calibration of Lidars and Event
Cameras [67.84498757689776]
本稿では,イベントカメラとライダーの直接校正法について述べる。
フレームベースのカメラインターミディエートおよび/または高精度の手測定への依存を除去する。
論文 参考訳(メタデータ) (2022-07-03T11:05:45Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。