論文の概要: PLIKS: A Pseudo-Linear Inverse Kinematic Solver for 3D Human Body
Estimation
- arxiv url: http://arxiv.org/abs/2211.11734v1
- Date: Mon, 21 Nov 2022 18:54:12 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-22 21:36:45.501087
- Title: PLIKS: A Pseudo-Linear Inverse Kinematic Solver for 3D Human Body
Estimation
- Title(参考訳): PLIKS:3次元人体推定のための擬似線形逆運動解法
- Authors: Karthik Shetty, Annette Birkhold, Srikrishna Jaganathan, Norbert
Strobel, Markus Kowarschik, Andreas Maier, Bernhard Egger
- Abstract要約: 一つの2次元画像から人体の3次元メッシュを再構築する問題を考察する。
既存のアプローチはしばしばパラメトリック統計モデルの形状、ポーズ、翻訳パラメータを回帰する。
線形最小二乗問題を最小化してモデルパラメータを回帰するPLIKSを提案する。
- 参考スコア(独自算出の注目度): 10.50175010474078
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We consider the problem of reconstructing a 3D mesh of the human body from a
single 2D image as a model-in-the-loop optimization problem. Existing
approaches often regress the shape, pose, and translation parameters of a
parametric statistical model assuming a weak-perspective camera. In contrast,
we first estimate 2D pixel-aligned vertices in image space and propose PLIKS
(Pseudo-Linear Inverse Kinematic Solver) to regress the model parameters by
minimizing a linear least squares problem. PLIKS is a linearized formulation of
the parametric SMPL model, which provides an optimal pose and shape solution
from an adequate initialization. Our method is based on analytically
calculating an initial pose estimate from the network predicted 3D mesh
followed by PLIKS to obtain an optimal solution for the given constraints. As
our framework makes use of 2D pixel-aligned maps, it is inherently robust to
partial occlusion. To demonstrate the performance of the proposed approach, we
present quantitative evaluations which confirm that PLIKS achieves more
accurate reconstruction with greater than 10% improvement compared to other
state-of-the-art methods with respect to the standard 3D human pose and shape
benchmarks while also obtaining a reconstruction error improvement of 12.9 mm
on the newer AGORA dataset.
- Abstract(参考訳): モデル・イン・ザ・ループ最適化問題として、1つの2次元画像から人体の3次元メッシュを再構築する問題を考察する。
既存のアプローチはしばしば、弱視カメラを想定したパラメトリック統計モデルの形状、ポーズ、翻訳パラメータを回帰する。
対照的に、まず画像空間における2次元画素整列頂点を推定し、線形最小二乗問題を最小化してモデルパラメータを回帰するPLIKS(Pseudo-Linear Inverse Kinematic Solver)を提案する。
PLIKSはパラメトリックSMPLモデルの線形化定式化であり、適切な初期化から最適なポーズと形状の解を提供する。
提案手法は,ネットワーク予測3次元メッシュからの初期ポーズ推定を解析的に算出し,PLIKSを用いて与えられた制約に対する最適解を求める。
我々のフレームワークは2次元ピクセルアライメントマップを使用しているため、本質的に部分閉塞に対して堅牢である。
提案手法の性能を実証するため,PLIKSが従来の3次元ポーズおよび形状ベンチマークと比較して10%以上の精度で再現可能であることを確認するとともに,新しいAGORAデータセットでは12.9mmの復元誤差改善が得られることを示す定量的評価を行った。
関連論文リスト
- Personalized 3D Human Pose and Shape Refinement [19.082329060985455]
回帰に基づく手法は3次元人間のポーズと形状推定の分野を支配してきた。
本稿では,初期人間のモデル推定値と対応する画像との密接な対応性を構築することを提案する。
提案手法は画像モデルアライメントの改善だけでなく,3次元精度の向上にも寄与する。
論文 参考訳(メタデータ) (2024-03-18T10:13:53Z) - IKOL: Inverse kinematics optimization layer for 3D human pose and shape
estimation via Gauss-Newton differentiation [44.00115413716392]
本稿では3次元ポーズ形状推定のための逆運動層(IKOL)を提案する。
IKOLは、既存の回帰ベースのメソッドよりもはるかに多い。
より正確な3Dポーズ推定を提供する。
論文 参考訳(メタデータ) (2023-02-02T12:43:29Z) - Multi-Person 3D Pose and Shape Estimation via Inverse Kinematics and
Refinement [5.655207244072081]
モノクロRGB画像からメッシュ形状の3Dポーズと形状を推定することは困難である。
そこで本研究では, 1) 閉塞・腐食3次元骨格推定による逆運動学の利点を生かした粗粒間パイプラインを提案する。
本研究では,3DPW, MuPoTS, AGORAデータセット上での最先端の手法の有効性を実証する。
論文 参考訳(メタデータ) (2022-10-24T18:29:06Z) - Pixel2Mesh++: 3D Mesh Generation and Refinement from Multi-View Images [82.32776379815712]
カメラポーズの有無にかかわらず、少数のカラー画像から3次元メッシュ表現における形状生成の問題について検討する。
我々は,グラフ畳み込みネットワークを用いたクロスビュー情報を活用することにより,形状品質をさらに向上する。
我々のモデルは初期メッシュの品質とカメラポーズの誤差に頑健であり、テスト時間最適化のための微分関数と組み合わせることができる。
論文 参考訳(メタデータ) (2022-04-21T03:42:31Z) - Adversarial Parametric Pose Prior [106.12437086990853]
我々は、SMPLパラメータを現実的なポーズを生成する値に制限する事前学習を行う。
得られた先行学習は実データ分布の多様性をカバーし、2次元キーポイントからの3次元再構成の最適化を容易にし、画像からの回帰に使用する場合のポーズ推定精度を向上することを示す。
論文 参考訳(メタデータ) (2021-12-08T10:05:32Z) - LatentHuman: Shape-and-Pose Disentangled Latent Representation for Human
Bodies [78.17425779503047]
本稿では,人体に対する新しい暗黙の表現法を提案する。
完全に微分可能で、非交叉形状で最適化可能であり、潜在空間を映し出す。
我々のモデルは、よく設計された損失を伴う、水密でない生データを直接訓練し、微調整することができる。
論文 参考訳(メタデータ) (2021-11-30T04:10:57Z) - KAMA: 3D Keypoint Aware Body Mesh Articulation [79.04090630502782]
本稿では,パラメトリックなボディーモデルSMPLを簡単な幾何学的変換によって記述する解析解を提案する。
今回のアプローチは,最先端のアプローチと比較して,画像コンテンツのアライメントが大幅に向上する。
挑戦的な3DPWおよびHuman3.6Mの結果は私達のアプローチが最先端のボディ網付属品をもたらすことを示します。
論文 参考訳(メタデータ) (2021-04-27T23:01:03Z) - HybrIK: A Hybrid Analytical-Neural Inverse Kinematics Solution for 3D
Human Pose and Shape Estimation [39.67289969828706]
本稿では,体メッシュ推定と3次元キーポイント推定のギャップを埋めるために,新しいハイブリッド逆キネマティクスソリューション(HybrIK)を提案する。
HybrIKは、正確な3D関節を相対的なボディ部分回転に変換し、3Dボディーメッシュを再構築する。
その結果,HybrIKは3次元ポーズの精度とパラメトリックな人間の身体構造の両方を保っていることがわかった。
論文 参考訳(メタデータ) (2020-11-30T10:32:30Z) - PaMIR: Parametric Model-Conditioned Implicit Representation for
Image-based Human Reconstruction [67.08350202974434]
本研究では,パラメトリックボディモデルと自由形深部暗黙関数を組み合わせたパラメトリックモデル記述型暗黙表現(PaMIR)を提案する。
本手法は, 挑戦的なポーズや衣料品のタイプにおいて, 画像に基づく3次元再構築のための最先端性能を実現する。
論文 参考訳(メタデータ) (2020-07-08T02:26:19Z) - Monocular Human Pose and Shape Reconstruction using Part Differentiable
Rendering [53.16864661460889]
近年の研究では、3次元基底真理によって教師されるディープニューラルネットワークを介してパラメトリックモデルを直接推定する回帰に基づく手法が成功している。
本稿では,ボディセグメンテーションを重要な監視対象として紹介する。
部分分割による再構成を改善するために,部分分割により部分ベースモデルを制御可能な部分レベル微分可能部を提案する。
論文 参考訳(メタデータ) (2020-03-24T14:25:46Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。