論文の概要: From Grasps to Dexterity: Large-Scale Grasp Pretraining for Dexterous Manipulation
- arxiv url: http://arxiv.org/abs/2606.30749v1
- Date: Mon, 29 Jun 2026 18:00:22 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-07-01 18:27:18.960422
- Title: From Grasps to Dexterity: Large-Scale Grasp Pretraining for Dexterous Manipulation
- Title(参考訳): グラフプからデクサリティへ:デクサラスマニピュレーションのための大規模グラフプレトレーニング
- Abstract要約: 我々は,ハイレベルハンドサブゴール予測と低レベルゴール条件制御を組み合わせた階層型模倣学習フレームワークを適用した。
大規模デクスタラスなグリップアノテーションから355k軌道のグリップ予測データセットを構築し,それを低レベルコントローラの事前トレーニングに用いる。
シミュレーションや実世界の実験を通じて,本手法は,ゼロから学習したエンドツーエンドの拡散政策や階層的な政策よりも優れている。
- 参考スコア(独自算出の注目度): 15.564266167695138
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Large-scale dexterous grasp datasets encode rich priors over hand-object interaction, but their use has largely been confined to grasp generation and pick-and-place manipulation. We study whether such data can instead support functional dexterity in articulated tool use, where a robot must acquire a tool, maintain contact, and operate its functional moving parts. We adapt a hierarchical imitation learning framework that combines high-level hand sub-goal prediction with a low-level goal-conditioned controller. We construct a 355k-trajectory grasp-pretraining dataset from large-scale dexterous grasp annotations and use it to pretrain the low-level controller. The controller is then fine-tuned on downstream task demonstrations. To evaluate this setting, we introduce DexCraft, a simulation benchmark with six articulated tool-use tasks requiring coordinated finger motion. Across simulation and real-world experiments, our approach outperforms end-to-end diffusion policy baselines and hierarchical policies trained from scratch. In the real world, it improves full-task success by 33.3 percentage points over DP3. These results show that grasp datasets can serve not only as resources for grasp synthesis, but also as scalable pretraining data for contact-rich dexterous manipulation. Videos are shown on https://yingyuan0414.github.io/grasp2dexterity/ .
- Abstract(参考訳): 大規模なデクスタラス・グリップデータセットは、手-物間相互作用に先立って、豊富な事前情報を符号化するが、その利用は主に、生成とピック・アンド・プレイス操作に限られている。
本研究では,ロボットが道具を入手し,接触を維持し,機能的に動く部品を操作する場合に,その機能的デキスタリティをサポートすることができるかどうかを検討する。
我々は,ハイレベルハンドサブゴール予測と低レベルゴール条件制御を組み合わせた階層型模倣学習フレームワークを適用した。
大規模デクスタラスなグリップアノテーションから355k軌道のグリップ予測データセットを構築し,それを低レベルコントローラの事前トレーニングに用いる。
コントローラは下流のタスクのデモで微調整される。
この設定を評価するために,手指の動きの調整を必要とする6つのツール使用タスクを用いたシミュレーションベンチマークであるDexCraftを紹介した。
シミュレーションや実世界の実験を通じて,本手法は,ゼロから学習したエンドツーエンドの拡散政策や階層的な政策よりも優れている。
現実の世界では、DP3よりも33.3%、フルタスクの成功率が向上している。
これらの結果から, グリップデータセットは, 合成を把握するためのリソースとしてだけでなく, 接触豊富なデキスタラス操作のためのスケーラブルな事前学習データとしても機能することが示唆された。
ビデオはhttps://yingyuan0414.github.io/grasp2dexterity/に表示される。
関連論文リスト
- Pre-training Visual Dexterity in Simulation [67.17477115017896]
シミュレーションで完全に収集されたデータを利用するデクスタラスな操作のための事前学習フレームワークを導入する。
5人のオペレーターの助けを借りて、1週間にわたって75時間のマルチタスク・デキスタラスな操作を収集し、配列モデリングの目的に基づいて因果変換器を事前訓練する。
提案手法は,シミュレーション遠隔操作が実世界における創発的操作のトレーニング前情報源として有効なことを示し,学習行動のクローン化方針をゼロから上回る結果を得た。
論文 参考訳(メタデータ) (2026-08-16T20:21:33Z) - Sparse2Act: Learning Action-Aligned Sparse 3D Representations for Cross-Domain Robot Manipulation [52.00134393320209]
Sparse2Actは、スパースポイントクラウドエンコーダの事前学習のための観測・動作アライメントフレームワークである。
マスク付きスパース3Dトークンは、観察と組み合わせたワークスペース運動の周囲のシーン特徴を整理するために訓練される。
LIBERO-10ベンチマークでは,500ステップの微調整を行い,平均86.9%の成功を達成した。
論文 参考訳(メタデータ) (2026-06-10T23:56:01Z) - GCImOpt: Learning efficient goal-conditioned policies by imitating optimal trajectories [0.0]
GCImOptは、軌道最適化によって生成されたデータセットをトレーニングすることで、効率的な目標条件付きポリシーを学習するアプローチである。
トレーニングされたポリシーは、高い成功率とほぼ最適制御プロファイルを達成することができることを示す。
論文 参考訳(メタデータ) (2026-04-24T17:23:34Z) - UltraDexGrasp: Learning Universal Dexterous Grasping for Bimanual Robots with Synthetic Data [70.96218513410454]
両面ロボットを用いた普遍的デクスタラスグリップのためのフレームワークであるUltraDexGraspを紹介する。
提案したデータ生成パイプラインは、最適化に基づくグリップ合成と計画に基づくデモ生成を統合する。
我々はUltraDexGrasp-20Mに基づいて、点雲を入力とし、一方向の注意を通してシーン特徴を集約し、制御コマンドを予測する、シンプルで効果的な把握ポリシーを開発した。
論文 参考訳(メタデータ) (2026-03-05T15:54:21Z) - ABot-M0: VLA Foundation Model for Robotic Manipulation with Action Manifold Learning [31.000965640377128]
ABot-M0は、システマティックデータキュレーションパイプラインを構築するフレームワークである。
これは不均一な生データを統一的で効率的な表現にエンドツーエンドに変換することを可能にする。
ABot-M0はデュアルストリーム機構を通じてモジュール認識をサポートする。
論文 参考訳(メタデータ) (2026-02-11T16:47:01Z) - Detect Anything via Next Point Prediction [51.55967987350882]
Rex-Omniは最先端の物体認識性能を実現する3BスケールのMLLMである。
COCOやLVISのようなベンチマークでは、Rex-Omniは回帰ベースのモデルに匹敵するパフォーマンスを得る。
論文 参考訳(メタデータ) (2025-10-14T17:59:54Z) - JUICER: Data-Efficient Imitation Learning for Robotic Assembly [21.43402768760014]
本稿では,人体実験予算を小さくすることで,模擬学習性能を向上させるパイプラインを提案する。
我々のパイプラインは、表現力のあるポリシーアーキテクチャと、データセットの拡張とシミュレーションベースのデータ拡張のための様々な技術を組み合わせています。
シミュレーションで4つの家具組立タスクのパイプラインを実演し、2500近い時間ステップで最大5つの部品をマニピュレータで組み立てます。
論文 参考訳(メタデータ) (2024-04-04T18:00:15Z) - Dexterous Functional Grasping [39.15442658671798]
本稿では,両世界の長所を組み合わさって,対象物の機能的把握を実現する。
少数の人的データを用いてRLの探索空間を削減するための固有グラスプの新規な応用を提案する。
固有グラフプ動作空間は,シミュレーションにおいてベースラインを上回り,実戦におけるハードコードグリップよりも優れ,訓練された人間の遠隔操作者よりも優れることがわかった。
論文 参考訳(メタデータ) (2023-12-05T18:59:23Z) - SPOT: Scalable 3D Pre-training via Occupancy Prediction for Learning Transferable 3D Representations [76.45009891152178]
トレーニング-ファインタニングアプローチは、さまざまな下流データセットとタスクをまたいだトレーニング済みのバックボーンを微調整することで、ラベル付けの負担を軽減することができる。
本稿では, 一般表現学習が, 占領予測のタスクを通じて達成できることを, 初めて示す。
本研究は,LiDAR 点の理解を促進するとともに,LiDAR の事前訓練における今後の進歩の道を開くことを目的とする。
論文 参考訳(メタデータ) (2023-09-19T11:13:01Z) - DexGraspNet: A Large-Scale Robotic Dexterous Grasp Dataset for General
Objects Based on Simulation [10.783992625475081]
本稿では,ロボットデキスタラスグルーピングのための大規模シミュレーションデータセットDexGraspNetを提案する。
私たちはShadowHandという、ロボット工学でよく見られる豪華なグリップを使って、5355のオブジェクトに対して123万のグリップを生成します。
GraspIt!が生成した以前のデータセットと比較すると、私たちのデータセットはオブジェクトやグリップだけでなく、多様性や品質も高くなります。
論文 参考訳(メタデータ) (2022-10-06T06:09:16Z) - Deep Imitation Learning for Bimanual Robotic Manipulation [70.56142804957187]
本稿では,ロボットによるバイマニュアル操作のための深層模倣学習フレームワークを提案する。
中心となる課題は、操作スキルを異なる場所にあるオブジェクトに一般化することである。
i)マルチモーダルダイナミクスを要素運動プリミティブに分解し、(ii)リカレントグラフニューラルネットワークを用いて各プリミティブをパラメータ化して相互作用を捕捉し、(iii)プリミティブを逐次的に構成する高レベルプランナと、プリミティブダイナミクスと逆運動学制御を組み合わせた低レベルコントローラを統合することを提案する。
論文 参考訳(メタデータ) (2020-10-11T01:40:03Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。