論文の概要: Beyond Weak Perspective for Monocular 3D Human Pose Estimation
- arxiv url: http://arxiv.org/abs/2009.06549v1
- Date: Mon, 14 Sep 2020 16:23:14 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-18 12:44:13.177839
- Title: Beyond Weak Perspective for Monocular 3D Human Pose Estimation
- Title(参考訳): 単眼的3次元ポーズ推定のための弱い視点
- Authors: Imry Kissos, Lior Fritz, Matan Goldman, Omer Meir, Eduard Oks and Mark
Kliger
- Abstract要約: 単眼映像からの3次元関節位置と方向予測の課題を考察する。
まず,市販のポーズ推定アルゴリズムを用いて2次元関節位置を推定する。
次に、初期パラメータを受信するSMPLifyアルゴリズムに準拠する。
- 参考スコア(独自算出の注目度): 6.883305568568084
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We consider the task of 3D joints location and orientation prediction from a
monocular video with the skinned multi-person linear (SMPL) model. We first
infer 2D joints locations with an off-the-shelf pose estimation algorithm. We
use the SPIN algorithm and estimate initial predictions of body pose, shape and
camera parameters from a deep regression neural network. We then adhere to the
SMPLify algorithm which receives those initial parameters, and optimizes them
so that inferred 3D joints from the SMPL model would fit the 2D joints
locations. This algorithm involves a projection step of 3D joints to the 2D
image plane. The conventional approach is to follow weak perspective
assumptions which use ad-hoc focal length. Through experimentation on the 3D
Poses in the Wild (3DPW) dataset, we show that using full perspective
projection, with the correct camera center and an approximated focal length,
provides favorable results. Our algorithm has resulted in a winning entry for
the 3DPW Challenge, reaching first place in joints orientation accuracy.
- Abstract(参考訳): 我々は,スキンド・マルチパーソン・リニア(SMPL)モデルを用いた単眼映像からの3次元関節位置と方向予測の課題を考察した。
まず,市販のポーズ推定アルゴリズムを用いて2次元関節位置を推定する。
我々は、スピンアルゴリズムを用いて、深層回帰ニューラルネットワークから、ボディポーズ、形状、カメラパラメータの初期予測を推定する。
次に、初期パラメータを受信するSMPLifyアルゴリズムに準拠し、SMPLモデルから推定された3次元関節が2次元関節の位置に適合するように最適化する。
このアルゴリズムは、2次元画像平面への3次元関節の投影ステップを含む。
従来のアプローチでは、アドホック焦点長を用いた弱い視点仮定に従う。
3D Poses in the Wild (3DPW) データセットを用いた実験により, カメラ中心と焦点距離を近似したフル視点投影を用いて, 良好な結果が得られることを示した。
我々のアルゴリズムは3DPWチャレンジに勝利し、関節方向の精度で1位に到達した。
関連論文リスト
- CameraHMR: Aligning People with Perspective [54.05758012879385]
モノクロ画像からの正確な3次元ポーズと形状推定の課題に対処する。
既存のトレーニングデータセットには、擬似基底真理(pGT)を持つ実画像が含まれている。
pGTの精度を向上させる2つの貢献をしている。
論文 参考訳(メタデータ) (2024-11-12T19:12:12Z) - Neural Voting Field for Camera-Space 3D Hand Pose Estimation [106.34750803910714]
3次元暗黙表現に基づく1枚のRGB画像からカメラ空間の3Dハンドポーズ推定のための統一的なフレームワークを提案する。
本稿では,カメラフラストラムにおける高密度3次元ポイントワイド投票により,カメラ空間の3次元ハンドポーズを推定する,新しい3次元高密度回帰手法を提案する。
論文 参考訳(メタデータ) (2023-05-07T16:51:34Z) - Diffusion-Based 3D Human Pose Estimation with Multi-Hypothesis
Aggregation [64.874000550443]
ジョイントワイズ・リジェクション・ベース・マルチハイブリッド・アグリゲーション(JPMA)を用いた拡散型3次元ポス推定法を提案する。
提案したJPMAは,D3DPが生成する複数の仮説を1つの3次元ポーズにまとめて実用的に利用する。
提案手法は, 最先端の決定論的アプローチと確率論的アプローチをそれぞれ1.5%, 8.9%上回った。
論文 参考訳(メタデータ) (2023-03-21T04:00:47Z) - Shape-aware Multi-Person Pose Estimation from Multi-View Images [47.13919147134315]
提案した粗大なパイプラインは、まず複数のカメラビューからノイズの多い2次元の観測結果を3次元空間に集約する。
最終的なポーズ推定は、高信頼度多視点2次元観測と3次元関節候補をリンクする新しい最適化スキームから得られる。
論文 参考訳(メタデータ) (2021-10-05T20:04:21Z) - Multi-View Multi-Person 3D Pose Estimation with Plane Sweep Stereo [71.59494156155309]
既存のマルチビュー3Dポーズ推定手法は、複数のカメラビューからグループ2Dポーズ検出に対するクロスビュー対応を明確に確立する。
平面スイープステレオに基づくマルチビュー3Dポーズ推定手法を提案し、クロスビュー融合と3Dポーズ再構築を1ショットで共同で解決します。
論文 参考訳(メタデータ) (2021-04-06T03:49:35Z) - On the role of depth predictions for 3D human pose estimation [0.04199844472131921]
推定深度値とともに2dジョイント位置を入力とし、3d位置をカメラ座標で予測するシステムを構築します。
結果は低次元の入力を受け入れ、リアルタイムシステムに統合されるニューラルネットワークで生成されます。
本システムは市販の2dポーズ検出器と深度マップ予測器と組み合わせて野生での3dポーズ推定を行うことができる。
論文 参考訳(メタデータ) (2021-03-03T16:51:38Z) - Synthetic Training for Monocular Human Mesh Recovery [100.38109761268639]
本稿では,RGB画像と大規模に異なる複数の身体部位の3次元メッシュを推定することを目的とする。
主な課題は、2D画像のすべての身体部分の3Dアノテーションを完備するトレーニングデータがないことである。
本稿では,D2S(Deep-to-scale)投影法を提案する。
論文 参考訳(メタデータ) (2020-10-27T03:31:35Z) - Fusing Wearable IMUs with Multi-View Images for Human Pose Estimation: A
Geometric Approach [76.10879433430466]
多視点画像と人手足に装着したIMUから3次元人間のポーズを推定する。
まず2つの信号から2Dのポーズを検出し、3D空間に持ち上げる。
単純な2段階のアプローチは、公開データセット上の大きなマージンによる最先端のエラーを低減する。
論文 参考訳(メタデータ) (2020-03-25T00:26:54Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。