論文の概要: Visual-tactile sensing for Real-time liquid Volume Estimation in
Grasping
- arxiv url: http://arxiv.org/abs/2202.11503v1
- Date: Wed, 23 Feb 2022 13:38:31 GMT
- ステータス: 処理完了
- システム内更新日: 2022-02-24 16:35:26.680405
- Title: Visual-tactile sensing for Real-time liquid Volume Estimation in
Grasping
- Title(参考訳): 把握における実時間液量推定のための視覚触覚センシング
- Authors: Fan Zhu, Ruixing Jia, Lei Yang, Youcan Yan, Zheng Wang, Jia Pan,
Wenping Wang
- Abstract要約: 変形性容器内の液体をリアルタイムに推定するためのビジュオ触覚モデルを提案する。
我々は、RGBカメラからの生の視覚入力と、特定の触覚センサーからの触覚手がかりの2つの感覚モードを融合する。
ロボットシステムは、推定モデルに基づいて、リアルタイムで適切に制御され、調整される。
- 参考スコア(独自算出の注目度): 58.50342759993186
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We propose a deep visuo-tactile model for realtime estimation of the liquid
inside a deformable container in a proprioceptive way.We fuse two sensory
modalities, i.e., the raw visual inputs from the RGB camera and the tactile
cues from our specific tactile sensor without any extra sensor calibrations.The
robotic system is well controlled and adjusted based on the estimation model in
real time. The main contributions and novelties of our work are listed as
follows: 1) Explore a proprioceptive way for liquid volume estimation by
developing an end-to-end predictive model with multi-modal convolutional
networks, which achieve a high precision with an error of around 2 ml in the
experimental validation. 2) Propose a multi-task learning architecture which
comprehensively considers the losses from both classification and regression
tasks, and comparatively evaluate the performance of each variant on the
collected data and actual robotic platform. 3) Utilize the proprioceptive
robotic system to accurately serve and control the requested volume of liquid,
which is continuously flowing into a deformable container in real time. 4)
Adaptively adjust the grasping plan to achieve more stable grasping and
manipulation according to the real-time liquid volume prediction.
- Abstract(参考訳): 本稿では, 変形性容器内の液体をプロバイオセプティブな方法でリアルタイムに推定する深部粘性触覚モデルを提案する。RGBカメラからの生の視覚入力と, 特定の触覚センサからの触覚刺激を, センサキャリブレーションを伴わずに, ロボットシステムは, 推定モデルに基づいて, リアルタイムに制御・調整されている。
私たちの作品の主な貢献とノベルティは以下のとおりである。
1)マルチモーダル畳み込みネットワークを用いたエンドツーエンド予測モデルを開発し,実験検証において約2mlの誤差で高精度な液体体積推定法を検討する。
2)分類タスクと回帰タスクの両方の損失を包括的に考慮し,収集したデータと実際のロボットプラットフォームにおける各バリエーションの性能を比較評価するマルチタスク学習アーキテクチャを提案する。
3) 変形可能な容器に連続的に流入する液の要求量を正確に制御するために, 摂動ロボットシステムを利用する。
4) リアルタイム液量予測により, 把持計画を適応的に調整し, より安定した把持・操作を実現する。
関連論文リスト
- OPUS: Occupancy Prediction Using a Sparse Set [64.60854562502523]
学習可能なクエリの集合を用いて、占有された場所とクラスを同時に予測するフレームワークを提案する。
OPUSには、モデルパフォーマンスを高めるための非自明な戦略が組み込まれている。
最も軽量なモデルではOcc3D-nuScenesデータセットの2倍 FPS に優れたRayIoUが得られる一方、最も重いモデルは6.1 RayIoUを上回ります。
論文 参考訳(メタデータ) (2024-09-14T07:44:22Z) - 4D Contrastive Superflows are Dense 3D Representation Learners [62.433137130087445]
我々は,LiDARとカメラのペアを連続的に利用して事前学習の目的を確立するための,新しいフレームワークであるSuperFlowを紹介する。
学習効率をさらに向上するため,カメラビューから抽出した知識の整合性を高めるプラグイン・アンド・プレイ・ビュー・一貫性モジュールを組み込んだ。
論文 参考訳(メタデータ) (2024-07-08T17:59:54Z) - LiqD: A Dynamic Liquid Level Detection Model under Tricky Small
Containers [5.361320134021586]
本稿では,U2-Netに基づくコンテナ動的液位検出モデルを提案する。
実験結果から, 容器内の液体の動的液体レベル変化を効果的に検出できることが示唆された。
論文 参考訳(メタデータ) (2024-03-13T05:53:25Z) - Inpainting Computational Fluid Dynamics with Deep Learning [8.397730500554047]
有効な流体データ補完法は、流体力学実験において必要なセンサー数を削減する。
流体データ完備化問題の誤った性質は、理論解を得るのを違法に困難にしている。
ベクトル量子化法を用いて、完全および不完全流体データ空間を離散値下次元表現にマッピングする。
論文 参考訳(メタデータ) (2024-02-27T03:44:55Z) - Fluid Viscosity Prediction Leveraging Computer Vision and Robot
Interaction [9.312155153982982]
本研究は,映像データから得られた流体振動を解析することにより,流体粘性予測の可能性を探るものである。
パイプラインは、自制的に事前訓練された3D畳み込みオートエンコーダを使用して、振動流体のセマンティックセグメンテーションマスクから特徴を抽出し、学習する。
事前訓練されたオートエンコーダによって生成された潜在表現を分類するために使用すると、システムは合計4140のテストデータポイントに対して97.1%の精度を達成する。
論文 参考訳(メタデータ) (2023-08-04T21:23:34Z) - StreamYOLO: Real-time Object Detection for Streaming Perception [84.2559631820007]
将来を予測する能力を備えたモデルを提供し、ストリーミング知覚の結果を大幅に改善する。
本稿では,複数の速度を駆動するシーンについて考察し,VasAP(Velocity-Awared streaming AP)を提案する。
本手法は,Argoverse-HDデータセットの最先端性能を実現し,SAPとVsAPをそれぞれ4.7%,VsAPを8.2%改善する。
論文 参考訳(メタデータ) (2022-07-21T12:03:02Z) - Physics-informed machine learning with differentiable programming for
heterogeneous underground reservoir pressure management [64.17887333976593]
地下貯水池の過圧化を避けることは、CO2の沈殿や排水の注入といった用途に欠かせない。
地中における複雑な不均一性のため, 噴射・抽出制御による圧力管理は困難である。
過圧化防止のための流体抽出速度を決定するために、フル物理モデルと機械学習を用いた微分可能プログラミングを用いる。
論文 参考訳(メタデータ) (2022-06-21T20:38:13Z) - Automatic Extrinsic Calibration Method for LiDAR and Camera Sensor
Setups [68.8204255655161]
本論文では,LiDAR,単眼,ステレオカメラを含む任意のセンサのパラメータを校正する手法を提案する。
提案手法は、通常、車両のセットアップで見られるように、非常に異なる解像度とポーズのデバイスを扱うことができる。
論文 参考訳(メタデータ) (2021-01-12T12:02:26Z) - Fast Modeling and Understanding Fluid Dynamics Systems with
Encoder-Decoder Networks [0.0]
本研究では,有限体積シミュレータを用いて,高精度な深層学習に基づくプロキシモデルを効率的に教えることができることを示す。
従来のシミュレーションと比較して、提案したディープラーニングアプローチはより高速なフォワード計算を可能にする。
深層学習モデルの重要物理パラメータに対する感度を定量化することにより、インバージョン問題を大きな加速で解くことができることを示す。
論文 参考訳(メタデータ) (2020-06-09T17:14:08Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。