論文の概要: Self-supervised 3D Human Pose Estimation from a Single Image
- arxiv url: http://arxiv.org/abs/2304.02349v1
- Date: Wed, 5 Apr 2023 10:26:21 GMT
- ステータス: 処理完了
- システム内更新日: 2023-04-06 12:52:19.974778
- Title: Self-supervised 3D Human Pose Estimation from a Single Image
- Title(参考訳): 単一画像からの自己教師付き3次元ポーズ推定
- Authors: Jose Sosa and David Hogg
- Abstract要約: 本研究では,1枚の画像から3次元人体ポーズを予測する自己教師型手法を提案する。
予測ネットワークは、典型的なポーズの人物と、未ペアの2Dポーズのセットを描写した未ラベル画像のデータセットから訓練される。
- 参考スコア(独自算出の注目度): 1.0878040851638
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: We propose a new self-supervised method for predicting 3D human body pose
from a single image. The prediction network is trained from a dataset of
unlabelled images depicting people in typical poses and a set of unpaired 2D
poses. By minimising the need for annotated data, the method has the potential
for rapid application to pose estimation of other articulated structures (e.g.
animals). The self-supervision comes from an earlier idea exploiting
consistency between predicted pose under 3D rotation. Our method is a
substantial advance on state-of-the-art self-supervised methods in training a
mapping directly from images, without limb articulation constraints or any 3D
empirical pose prior. We compare performance with state-of-the-art
self-supervised methods using benchmark datasets that provide images and
ground-truth 3D pose (Human3.6M, MPI-INF-3DHP). Despite the reduced requirement
for annotated data, we show that the method outperforms on Human3.6M and
matches performance on MPI-INF-3DHP. Qualitative results on a dataset of human
hands show the potential for rapidly learning to predict 3D pose for
articulated structures other than the human body.
- Abstract(参考訳): 一つの画像から3次元人体のポーズを予測する新しい自己教師あり手法を提案する。
予測ネットワークは、典型的なポーズの人々を描いたラベルなしの画像のデータセットと、ペアなしの2dポーズのセットから訓練される。
注釈付きデータの必要性を最小化することにより、他の関節構造(例えば動物)の推定を迅速に行うことができる。
自己スーパービジョンは、予測されたポーズ間の整合性を利用した3次元回転による以前のアイデアに由来する。
本手法は,手足関節の制約や3D経験的ポーズを伴わずに,画像から直接マッピングを訓練する最先端の自己教師手法の進歩である。
画像と地上3Dポーズ(Human3.6M, MPI-INF-3DHP)を提供するベンチマークデータセットを用いて,最先端の自己教師手法と比較した。
注釈付きデータの要求が減ったにもかかわらず、この手法はHuman3.6Mよりも優れ、MPI-INF-3DHPの性能と一致している。
人間の手のデータセット上の定性的な結果は、人体以外の関節構造の3Dポーズを素早く学習する可能性を示している。
関連論文リスト
- ManiPose: Manifold-Constrained Multi-Hypothesis 3D Human Pose Estimation [54.86887812687023]
ほとんどの3D-HPE法は回帰モデルに依存しており、入力と出力の1対1のマッピングを前提としている。
提案するManiPoseは,2次元入力毎に複数の候補3次元ポーズを提案可能な,新しい多様体制約型マルチハイポテーシスモデルである。
従来のマルチハイブリッドアプローチとは異なり、我々のソリューションは完全に教師付きであり、複雑な生成モデルに依存しない。
論文 参考訳(メタデータ) (2023-12-11T13:50:10Z) - Understanding Pose and Appearance Disentanglement in 3D Human Pose
Estimation [72.50214227616728]
ポーズ情報から外見情報を引き離すために,自己教師型で画像表現を学習する手法がいくつか提案されている。
我々は,多種多様な画像合成実験を通じて,自己教師ネットワークの観点から,ゆがみについて検討する。
我々は,対象の自然な外見変化を生起することに焦点を当てた敵対的戦略を設計し,その反対に,絡み合ったネットワークが堅牢であることを期待している。
論文 参考訳(メタデータ) (2023-09-20T22:22:21Z) - Learning to Estimate 3D Human Pose from Point Cloud [13.27496851711973]
本稿では,複雑な人体構造物の表面をモデル化するための入力データとして,点雲データを用いた3次元ポーズ推定のための深層人体ポーズネットワークを提案する。
2つの公開データセットに対する実験により,従来の最先端手法よりも精度が高いことを示す。
論文 参考訳(メタデータ) (2022-12-25T14:22:01Z) - PONet: Robust 3D Human Pose Estimation via Learning Orientations Only [116.1502793612437]
本稿では,学習向きのみを用いて3次元ポーズを頑健に推定できる新しいPose Orientation Net(PONet)を提案する。
PONetは、局所的な画像証拠を利用して、これらの手足の3D方向を推定し、3Dポーズを復元する。
我々は,Human3.6M,MPII,MPI-INF-3DHP,3DPWを含む複数のデータセットについて評価を行った。
論文 参考訳(メタデータ) (2021-12-21T12:48:48Z) - ElePose: Unsupervised 3D Human Pose Estimation by Predicting Camera
Elevation and Learning Normalizing Flows on 2D Poses [23.554957518485324]
本研究では、1つの画像から3次元人間のポーズを予測することを学ぶ教師なしのアプローチを提案する。
ランダムなプロジェクションに最も近い3次元ポーズを推定し、2次元ポーズの正規化フローを用いて推定する。
我々は,Human3.6M と MPI-INF-3DHP のベンチマークデータセット上で,最先端の教師なしポーズ推定手法を多くの指標で上回っている。
論文 参考訳(メタデータ) (2021-12-14T01:12:45Z) - Learning Temporal 3D Human Pose Estimation with Pseudo-Labels [3.0954251281114513]
自己監督型3次元ポーズ推定のための簡易かつ効果的なアプローチを提案する。
我々は、マルチビューカメラシステムの2Dボディポーズ推定を三角測量に頼っている。
提案手法はHuman3.6MとMPI-INF-3DHPベンチマークにおける最先端性能を実現する。
論文 参考訳(メタデータ) (2021-10-14T17:40:45Z) - Learning Realistic Human Reposing using Cyclic Self-Supervision with 3D
Shape, Pose, and Appearance Consistency [55.94908688207493]
画像品質のギャップを教師付き手法で埋める自己教師型フレームワークSPICEを提案する。
自己超越を可能にする重要な洞察は、様々な方法で人体に関する3D情報を活用することである。
SPICEはDeepFashionデータセット上で最先端のパフォーマンスを達成する。
論文 参考訳(メタデータ) (2021-10-11T17:48:50Z) - Self-Supervised 3D Human Pose Estimation with Multiple-View Geometry [2.7541825072548805]
本稿では,複数視点カメラシステムに基づく1人の人物の3次元ポーズ推定のための自己教師付き学習アルゴリズムを提案する。
そこで本研究では,2次元・3次元の立体ポーズが不要な4自由度関数学習アルゴリズムを提案する。
論文 参考訳(メタデータ) (2021-08-17T17:31:24Z) - Self-Supervised 3D Human Pose Estimation via Part Guided Novel Image
Synthesis [72.34794624243281]
ラベルのないビデオフレームからバリエーションを分離する自己教師付き学習フレームワークを提案する。
3Dポーズと空間部分マップの表現ギャップを埋める、微分可能な形式化により、多様なカメラの動きを持つビデオで操作できる。
論文 参考訳(メタデータ) (2020-04-09T07:55:01Z) - Weakly-Supervised 3D Human Pose Learning via Multi-view Images in the
Wild [101.70320427145388]
本稿では、3Dアノテーションを必要としない弱教師付きアプローチを提案し、ラベルのないマルチビューデータから3Dポーズを推定する。
提案手法を2つの大規模データセット上で評価する。
論文 参考訳(メタデータ) (2020-03-17T08:47:16Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。