論文の概要: 3D Multi-bodies: Fitting Sets of Plausible 3D Human Models to Ambiguous
Image Data
- arxiv url: http://arxiv.org/abs/2011.00980v1
- Date: Mon, 2 Nov 2020 13:55:31 GMT
- ステータス: 処理完了
- システム内更新日: 2022-09-30 12:24:18.253067
- Title: 3D Multi-bodies: Fitting Sets of Plausible 3D Human Models to Ambiguous
Image Data
- Title(参考訳): 3次元多体:不明瞭な画像データに対する可塑性3次元人間のモデルセット
- Authors: Benjamin Biggs, S\'ebastien Ehrhadt, Hanbyul Joo, Benjamin Graham,
Andrea Vedaldi and David Novotny
- Abstract要約: 単眼・部分閉塞視からヒトの高密度3次元再構成を実現することの問題点を考察する。
身体の形状やポーズをパラメータ化することで、あいまいさをより効果的にモデル化できることを示唆する。
提案手法は, 3次元人間の標準ベンチマークにおいて, あいまいなポーズ回復において, 代替手法よりも優れていることを示す。
- 参考スコア(独自算出の注目度): 77.57798334776353
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We consider the problem of obtaining dense 3D reconstructions of humans from
single and partially occluded views. In such cases, the visual evidence is
usually insufficient to identify a 3D reconstruction uniquely, so we aim at
recovering several plausible reconstructions compatible with the input data. We
suggest that ambiguities can be modelled more effectively by parametrizing the
possible body shapes and poses via a suitable 3D model, such as SMPL for
humans. We propose to learn a multi-hypothesis neural network regressor using a
best-of-M loss, where each of the M hypotheses is constrained to lie on a
manifold of plausible human poses by means of a generative model. We show that
our method outperforms alternative approaches in ambiguous pose recovery on
standard benchmarks for 3D humans, and in heavily occluded versions of these
benchmarks.
- Abstract(参考訳): 単眼・部分閉塞視からヒトの高密度3次元再構成を実現することの問題点を考察する。
このような場合、視覚的証拠は3次元再構成を一意に識別するには不十分であり、入力データと互換性のある複数の可視的再構成を復元することを目指している。
ヒトのSMPLのような適切な3次元モデルを用いて身体形状やポーズをパラメータ化することで、曖昧さをより効果的にモデル化できることが示唆された。
そこで本研究では,M仮説のそれぞれが生成モデルを用いて,可塑性な人間のポーズの多様体上に置かれることが制約されているマルチハイプセシスニューラルネットワーク回帰器について検討する。
提案手法は,3次元人間の標準ベンチマークにおいて,曖昧なポーズリカバリを行うための代替手法に勝ることを示す。
関連論文リスト
- StackFLOW: Monocular Human-Object Reconstruction by Stacked Normalizing Flow with Offset [56.71580976007712]
本研究では,人間のメッシュと物体メッシュの表面から密にサンプリングされたアンカー間の人物体オフセットを用いて,人物体空間関係を表現することを提案する。
この表現に基づいて、画像から人・物間の空間関係の後方分布を推定するスタック正規化フロー(StackFLOW)を提案する。
最適化段階では、サンプルの可能性を最大化することにより、人体ポーズと物体6Dポーズを微調整する。
論文 参考訳(メタデータ) (2024-07-30T04:57:21Z) - Personalized 3D Human Pose and Shape Refinement [19.082329060985455]
回帰に基づく手法は3次元人間のポーズと形状推定の分野を支配してきた。
本稿では,初期人間のモデル推定値と対応する画像との密接な対応性を構築することを提案する。
提案手法は画像モデルアライメントの改善だけでなく,3次元精度の向上にも寄与する。
論文 参考訳(メタデータ) (2024-03-18T10:13:53Z) - ManiPose: Manifold-Constrained Multi-Hypothesis 3D Human Pose Estimation [71.2556016049579]
ManiPoseは、人為的な2D-to-3Dリフトのための多様体拘束型マルチハイブリッドモデルである。
人間のポーズ多様体上の出力を制約することにより、ManiPoseはすべての仮説的なポーズの一貫性を保証する。
実世界のデータセット上でのManiPoseのパフォーマンスを示す。
論文 参考訳(メタデータ) (2023-12-11T13:50:10Z) - DiffuPose: Monocular 3D Human Pose Estimation via Denoising Diffusion
Probabilistic Model [25.223801390996435]
本稿では,1つの2次元キーポイント検出から3次元ポーズを再構築することに焦点を当てた。
我々は,市販の2D検出器から多種多様な3Dポーズを効果的にサンプリングするための,拡散に基づく新しいフレームワークを構築した。
我々は,広く採用されているHuman3.6MとHumanEva-Iデータセットについて評価を行った。
論文 参考訳(メタデータ) (2022-12-06T07:22:20Z) - Probabilistic Modeling for Human Mesh Recovery [73.11532990173441]
本稿では,2次元の証拠から3次元の人体復元の問題に焦点を当てた。
我々は,この問題を,入力から3Dポーズの分布へのマッピング学習として再考した。
論文 参考訳(メタデータ) (2021-08-26T17:55:11Z) - Probabilistic Monocular 3D Human Pose Estimation with Normalizing Flows [24.0966076588569]
本稿では,不明瞭な逆2D-to-3D問題を解くために,決定論的3D-to-2Dマッピングを利用する正規化フローベース手法を提案する。
我々は、Human3.6MとMPI-INF-3DHPの2つのベンチマークデータセットに対するアプローチを評価し、ほとんどの指標において同等の手法を上回りました。
論文 参考訳(メタデータ) (2021-07-29T07:33:14Z) - THUNDR: Transformer-based 3D HUmaN Reconstruction with Markers [67.8628917474705]
THUNDRは、人の3Dポーズと形状を再構築するトランスフォーマーベースのディープニューラルネットワーク手法である。
完全教師付きモデルと自己教師型モデルの両方に対して,Human3.6Mと3DPWの最先端結果を示す。
野生で収集された難易度の高い人間のポーズに対して, 非常に堅固な3次元再構成性能を観察した。
論文 参考訳(メタデータ) (2021-06-17T09:09:24Z) - Weakly Supervised Generative Network for Multiple 3D Human Pose
Hypotheses [74.48263583706712]
単一画像からの3次元ポーズ推定は、欠落した深さのあいまいさに起因する逆問題である。
逆問題に対処するために,弱い教師付き深層生成ネットワークを提案する。
論文 参考訳(メタデータ) (2020-08-13T09:26:01Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。