論文の概要: Active Task Randomization: Learning Visuomotor Skills for Sequential
Manipulation by Proposing Feasible and Novel Tasks
- arxiv url: http://arxiv.org/abs/2211.06134v1
- Date: Fri, 11 Nov 2022 11:24:55 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-14 15:20:40.704547
- Title: Active Task Randomization: Learning Visuomotor Skills for Sequential
Manipulation by Proposing Feasible and Novel Tasks
- Title(参考訳): アクティブタスクのランダム化:実行可能タスクと新規タスクの提案による逐次操作のためのバイスモータスキルの学習
- Authors: Kuan Fang, Toki Migimatsu, Ajay Mandlekar, Li Fei-Fei, Jeannette Bohg
- Abstract要約: 本研究では,アクティヴタスクランダム化(ATR)を提案する。この手法は,シミュレーションにおいて実現可能な新しいタスクを自動生成することによって,逐次操作のためのビズモータスキルを学習するアプローチである。
ベースライン手法と比較して、我々の手法を用いて学んだスキルは、一貫してより良い成功率を達成する。
- 参考スコア(独自算出の注目度): 37.73239471412444
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Solving real-world sequential manipulation tasks requires robots to have a
repertoire of skills applicable to a wide range of circumstances. To acquire
such skills using data-driven approaches, we need massive and diverse training
data which is often labor-intensive and non-trivial to collect and curate. In
this work, we introduce Active Task Randomization (ATR), an approach that
learns visuomotor skills for sequential manipulation by automatically creating
feasible and novel tasks in simulation. During training, our approach
procedurally generates tasks using a graph-based task parameterization. To
adaptively estimate the feasibility and novelty of sampled tasks, we develop a
relational neural network that maps each task parameter into a compact
embedding. We demonstrate that our approach can automatically create suitable
tasks for efficiently training the skill policies to handle diverse scenarios
with a variety of objects. We evaluate our method on simulated and real-world
sequential manipulation tasks by composing the learned skills using a task
planner. Compared to baseline methods, the skills learned using our approach
consistently achieve better success rates.
- Abstract(参考訳): 現実のシーケンシャルな操作タスクを解決するためには、ロボットは幅広い状況に適用可能なスキルのレパートリーを持つ必要がある。
このようなスキルをデータ駆動のアプローチで獲得するには,労働集約的かつ非自明な,大規模かつ多様なトレーニングデータが必要である。
本研究では,実行可能かつ新規なタスクをシミュレーションで自動生成することにより,逐次操作のためのヴィゾモータのスキルを学習する手法であるアクティブタスクランダム化(atr)を提案する。
学習中、グラフに基づくタスクパラメータ化を用いてタスクを手続き的に生成する。
サンプルタスクの実現可能性と新規性を適応的に推定するために,各タスクパラメータをコンパクトな埋め込みにマッピングする関係ニューラルネットワークを開発した。
このアプローチは,さまざまなオブジェクトを用いた多様なシナリオを扱うためのスキルポリシを効率的にトレーニングするための適切なタスクを自動生成できることを実証する。
タスクプランナーを用いて学習スキルを構成することにより,シミュレーションおよび実世界の逐次操作タスクの評価を行う。
ベースライン手法と比較して、私たちのアプローチで学んだスキルは、一貫してより良い成功率を達成します。
関連論文リスト
- Active Instruction Tuning: Improving Cross-Task Generalization by
Training on Prompt Sensitive Tasks [101.40633115037983]
インストラクションチューニング(IT)は,大規模言語モデル(LLM)を命令付き多種多様なタスクで訓練することにより,印象的なゼロショット一般化を実現する。
ITモデルの性能と一般化性を改善するために、新しいタスクをどのように選択するかは、未解決の問題である。
本稿では,情報的タスクを識別する新しいフレームワークである即時不確実性に基づくアクティブな指導チューニングを提案し,選択したタスク上でモデルをアクティブにチューニングする。
論文 参考訳(メタデータ) (2023-11-01T04:40:05Z) - Reinforcement Learning with Success Induced Task Prioritization [68.8204255655161]
本稿では,自動カリキュラム学習のためのフレームワークであるSuccess induced Task Prioritization (SITP)を紹介する。
アルゴリズムはエージェントに最速の学習を提供するタスクの順序を選択する。
我々は,SITPが他のカリキュラム設計手法と一致するか,あるいは上回っていることを実証する。
論文 参考訳(メタデータ) (2022-12-30T12:32:43Z) - Transferring Knowledge for Reinforcement Learning in Contact-Rich
Manipulation [10.219833196479142]
複数のスキルの前提を活かして、類似したタスクのファミリー内で知識を伝達するという課題に対処する。
提案手法は, 先行タスク毎の実証軌道から, スキル埋め込みを表す潜在行動空間を学習する。
我々は,ペグ・イン・ホール・イン・イン・イン・イン・イン・イン・イン・イン・イン・インサート・タスクのセットを用いて本手法の評価を行い,トレーニング中に遭遇したことのない新しいタスクへのより良い一般化を実証した。
論文 参考訳(メタデータ) (2022-09-19T10:31:13Z) - An Evolutionary Approach to Dynamic Introduction of Tasks in Large-scale
Multitask Learning Systems [4.675744559395732]
マルチタスク学習は、複数のタスクから学習できるモデルが知識伝達によってより良い品質と効率を達成すると仮定する。
最先端のMLモデルは、タスクごとに高いカスタマイズに依存し、タスクの数をスケールするのではなく、サイズとデータスケールを活用する。
本稿では,大規模マルチタスクモデルを生成でき,新しいタスクの動的かつ連続的な追加を支援する進化的手法を提案する。
論文 参考訳(メタデータ) (2022-05-25T13:10:47Z) - Variational Multi-Task Learning with Gumbel-Softmax Priors [105.22406384964144]
マルチタスク学習は、タスク関連性を探究し、個々のタスクを改善することを目的としている。
本稿では,複数のタスクを学習するための一般的な確率的推論フレームワークである変分マルチタスク学習(VMTL)を提案する。
論文 参考訳(メタデータ) (2021-11-09T18:49:45Z) - Efficiently Identifying Task Groupings for Multi-Task Learning [55.80489920205404]
マルチタスク学習は、あるタスクによって学習された情報を活用して、他のタスクのトレーニングに役立てることができる。
マルチタスク学習モデルにおいて、どのタスクを一緒にトレーニングすべきかを選択するアプローチを提案する。
本手法は,全タスクを協調学習し,タスクの勾配が他のタスクの損失に影響を及ぼす影響を定量化する。
論文 参考訳(メタデータ) (2021-09-10T02:01:43Z) - Discovering Generalizable Skills via Automated Generation of Diverse
Tasks [82.16392072211337]
本稿では,多種多様なタスクの自動生成による一般化可能なスキルの発見手法を提案する。
教師なしスキル発見の先行研究とは対照的に,本手法では各スキルをトレーニング可能なタスクジェネレータが生成するユニークなタスクとペアリングする。
生成したタスクにおけるロボットの動作に定義されたタスク判別器を共同で訓練し、多様性目標の低いエビデンスを推定する。
学習スキルは階層的な強化学習アルゴリズムで構成され、目に見えない目標タスクを解決する。
論文 参考訳(メタデータ) (2021-06-26T03:41:51Z) - Adaptive Procedural Task Generation for Hard-Exploration Problems [78.20918366839399]
ハード探索問題における強化学習を容易にするために,適応手続きタスク生成(APT-Gen)を導入する。
私たちのアプローチの中心は、ブラックボックスの手続き生成モジュールを通じてパラメータ化されたタスク空間からタスクを作成することを学習するタスクジェネレータです。
学習進捗の直接指標がない場合のカリキュラム学習を可能にするために,生成したタスクにおけるエージェントのパフォーマンスと,対象タスクとの類似性をバランスさせてタスクジェネレータを訓練することを提案する。
論文 参考訳(メタデータ) (2020-07-01T09:38:51Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。