論文の概要: A Hand Motion-guided Articulation and Segmentation Estimation
- arxiv url: http://arxiv.org/abs/2005.03691v1
- Date: Thu, 7 May 2020 18:32:08 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-06 00:00:46.156109
- Title: A Hand Motion-guided Articulation and Segmentation Estimation
- Title(参考訳): 手動誘導による調音とセグメンテーション推定
- Authors: Richard Sahala Hartanto, Ryoichi Ishikawa, Menandro Roxas, Takeshi
Oishi
- Abstract要約: 手の動きは、音節モデルの最初の推測を与える: プリズマティックまたは逆関節(英語版)である。
RGB-D画像と手の動きの制約を合わせることで関節パラメータを推定する。
最後に、対象領域を調音モデルに沿って対称に移動するクラスタ領域から選択する。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In this paper, we present a method for simultaneous articulation model
estimation and segmentation of an articulated object in RGB-D images using
human hand motion. Our method uses the hand motion in the processes of the
initial articulation model estimation, ICP-based model parameter optimization,
and region selection of the target object. The hand motion gives an initial
guess of the articulation model: prismatic or revolute joint. The method
estimates the joint parameters by aligning the RGB-D images with the constraint
of the hand motion. Finally, the target regions are selected from the cluster
regions which move symmetrically along with the articulation model. Our
experimental results show the robustness of the proposed method for the various
objects.
- Abstract(参考訳): 本稿では,人間の手の動きを用いたrgb-d画像における調音物体の同時調音モデル推定とセグメンテーション手法を提案する。
本手法では,初期調音モデル推定,icpに基づくモデルパラメータ最適化,対象物体の領域選択のプロセスにおいて手の動きを用いる。
手の動きは調音モデルの最初の推測を与える: 主観的関節(prismatic joint)または回旋関節(revolute joint)。
RGB-D画像を手の動きの制約に合わせることで関節パラメータを推定する。
最後に、明瞭度モデルに沿って対称に移動するクラスタ領域から対象領域を選択する。
実験により,提案手法の頑健性について検討した。
関連論文リスト
- HandNeRF: Neural Radiance Fields for Animatable Interacting Hands [122.32855646927013]
神経放射場(NeRF)を用いて手の動きを正確に再現する新しい枠組みを提案する。
我々は,提案するHandNeRFのメリットを検証するための広範囲な実験を行い,その成果を報告する。
論文 参考訳(メタデータ) (2023-03-24T06:19:19Z) - Motion Prediction via Joint Dependency Modeling in Phase Space [40.54430409142653]
我々は、運動解剖学の明示的な事前知識を活用するために、新しい畳み込みニューラルモデルを導入する。
次に,個々の関節機能間の暗黙的関係を学習するグローバル最適化モジュールを提案する。
本手法は,大規模な3次元人体動作ベンチマークデータセットを用いて評価する。
論文 参考訳(メタデータ) (2022-01-07T08:30:01Z) - Distributional Depth-Based Estimation of Object Articulation Models [21.046351215949525]
本研究では,奥行き画像から直接,調音モデルパラメータの分布を効率よく学習する手法を提案する。
私たちのコアコントリビューションには、剛体変換に対する分布の新しい表現が含まれています。
本稿では,カテゴリに依存しない調音モデル推定を行う新しい深層学習手法DUST-netを提案する。
論文 参考訳(メタデータ) (2021-08-12T17:44:51Z) - RGB2Hands: Real-Time Tracking of 3D Hand Interactions from Monocular RGB
Video [76.86512780916827]
本稿では,1台のRGBカメラによる骨格ポーズのモーションキャプチャと手の表面形状をリアルタイムに計測する手法を提案する。
RGBデータの本質的な深さの曖昧さに対処するために,我々は新しいマルチタスクCNNを提案する。
RGBの片手追跡と3D再構築パイプラインの個々のコンポーネントを実験的に検証した。
論文 参考訳(メタデータ) (2021-06-22T12:53:56Z) - Skeleton-aware multi-scale heatmap regression for 2D hand pose
estimation [1.0152838128195467]
本稿では,2つの主要モジュールからなるディープラーニングベースのフレームワークを提案する。
前者は、手骨を検知し、手の境界ボックスをローカライズするセグメンテーションベースのアプローチを提案する。
第2のモジュールは、マルチスケールのヒートマップ回帰アプローチを通じて2次元関節位置を回帰する。
論文 参考訳(メタデータ) (2021-05-23T10:23:51Z) - Nothing But Geometric Constraints: A Model-Free Method for Articulated
Object Pose Estimation [89.82169646672872]
本稿では,ロボットアームの関節構成を,モデルに先入観を持たずにRGBまたはRGB-D画像のシーケンスから推定する,教師なし視覚ベースシステムを提案する。
我々は,古典幾何学的定式化と深層学習を組み合わせることで,この課題を解決するために,極性多剛体制約を拡張した。
論文 参考訳(メタデータ) (2020-11-30T20:46:48Z) - Pose And Joint-Aware Action Recognition [87.4780883700755]
本稿では,まず,共有動作エンコーダを用いて各関節の動作特徴を別々に抽出する,関節に基づく動作認識の新しいモデルを提案する。
私たちのジョイントセレクタモジュールは、そのタスクの最も識別性の高いジョイントを選択するために、ジョイント情報を再重み付けします。
JHMDB, HMDB, Charades, AVA アクション認識データセットにおける最先端のジョイントベースアプローチに対する大きな改善点を示す。
論文 参考訳(メタデータ) (2020-10-16T04:43:34Z) - SeqHAND:RGB-Sequence-Based 3D Hand Pose and Shape Estimation [48.456638103309544]
RGB画像に基づく3次元手ポーズ推定は長い間研究されてきた。
本研究では,人間の手の動きを模倣する合成データセットを生成する手法を提案する。
本研究では,3次元ポーズ推定における時間情報の利用により,一般的なポーズ推定が大幅に向上することを示す。
論文 参考訳(メタデータ) (2020-07-10T05:11:14Z) - Monocular Human Pose and Shape Reconstruction using Part Differentiable
Rendering [53.16864661460889]
近年の研究では、3次元基底真理によって教師されるディープニューラルネットワークを介してパラメトリックモデルを直接推定する回帰に基づく手法が成功している。
本稿では,ボディセグメンテーションを重要な監視対象として紹介する。
部分分割による再構成を改善するために,部分分割により部分ベースモデルを制御可能な部分レベル微分可能部を提案する。
論文 参考訳(メタデータ) (2020-03-24T14:25:46Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。