論文の概要: Detailed Avatar Recovery from Single Image
- arxiv url: http://arxiv.org/abs/2108.02931v1
- Date: Fri, 6 Aug 2021 03:51:26 GMT
- ステータス: 処理完了
- システム内更新日: 2021-08-09 14:34:35.120795
- Title: Detailed Avatar Recovery from Single Image
- Title(参考訳): 単一画像からの詳細なアバター回収
- Authors: Hao Zhu and Xinxin Zuo and Haotian Yang and Sen Wang and Xun Cao and
Ruigang Yang
- Abstract要約: 本稿では,単一画像からエンフデテールアバターを回収するための新しい枠組みを提案する。
階層的メッシュ変形フレームワークでは、ディープニューラルネットワークを使用して3次元形状を洗練しています。
本手法は,皮膚モデルを超えて,完全なテクスチャで詳細な人体形状を復元することができる。
- 参考スコア(独自算出の注目度): 50.82102098057822
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: This paper presents a novel framework to recover \emph{detailed} avatar from
a single image. It is a challenging task due to factors such as variations in
human shapes, body poses, texture, and viewpoints. Prior methods typically
attempt to recover the human body shape using a parametric-based template that
lacks the surface details. As such resulting body shape appears to be without
clothing. In this paper, we propose a novel learning-based framework that
combines the robustness of the parametric model with the flexibility of
free-form 3D deformation. We use the deep neural networks to refine the 3D
shape in a Hierarchical Mesh Deformation (HMD) framework, utilizing the
constraints from body joints, silhouettes, and per-pixel shading information.
Our method can restore detailed human body shapes with complete textures beyond
skinned models. Experiments demonstrate that our method has outperformed
previous state-of-the-art approaches, achieving better accuracy in terms of
both 2D IoU number and 3D metric distance.
- Abstract(参考訳): 本稿では,単一画像からemph{detailed} アバターを回収するための新しい枠組みを提案する。
人間の形、身体のポーズ、テクスチャ、視点のバリエーションなどの要因があるため、これは難しい課題である。
従来の方法は、表面の詳細を欠いたパラメトリックベースのテンプレートを使用して人体の形状を復元しようとする。
結果として体型は衣服がないように見える。
本稿では,パラメトリックモデルのロバスト性と自由形状の3次元変形の柔軟性を組み合わせた,新しい学習基盤フレームワークを提案する。
我々は,深層ニューラルネットワークを用いて階層的メッシュ変形(hmd)フレームワークにおける3次元形状を洗練し,ボディジョイントやシルエット,ピクセル毎のシェーディング情報の制約を生かした。
本手法はスキンモデル以上の完全なテクスチャで人体の詳細な形状を復元する。
実験により, 2次元iou数と3次元距離の両方において, 従来手法よりも精度が向上したことを示す。
関連論文リスト
- Cloth2Body: Generating 3D Human Body Mesh from 2D Clothing [54.29207348918216]
Cloth2Bodyは、入力の部分的な観察と出力の多様性によって引き起こされる新しい課題に対処する必要がある。
本稿では,2次元衣料品画像のポーズと形状によってパラメータ化された3Dボディメッシュを高精度に推定できるエンドツーエンドフレームワークを提案する。
実験結果から示されるように,提案手法は最先端の性能を実現し,自然および多様な3Dボディメッシュを2次元画像から効果的に回収することができる。
論文 参考訳(メタデータ) (2023-09-28T06:18:38Z) - Accurate 3D Body Shape Regression using Metric and Semantic Attributes [55.58629009876271]
画像からの3次元身体形状の回帰は、人文計測や言語的形状特性から訓練できることを示す。
これは、画像から3次元の身体形状の回帰を、容易に測定できる人文計測と言語的形状特性から訓練できる最初の実演である。
論文 参考訳(メタデータ) (2022-06-14T17:54:49Z) - Pop-Out Motion: 3D-Aware Image Deformation via Learning the Shape
Laplacian [58.704089101826774]
形状分類と変形型に最小限の制約を課した3次元画像変形法を提案する。
点雲として表される3次元再構成の基底体積のラプラシアン形状を予測するために,教師付き学習に基づくアプローチを採用する。
実験では,2次元キャラクタと人間の衣料画像の変形実験を行った。
論文 参考訳(メタデータ) (2022-03-29T04:57:18Z) - Creating and Reenacting Controllable 3D Humans with Differentiable
Rendering [3.079885946230076]
本稿では,人間アクターの外観を伝達し再現する,エンドツーエンドのニューラルレンダリングアーキテクチャを提案する。
提案手法は、人体多様体構造をモデル化するために、慎重に設計されたグラフ畳み込みネットワーク(GCN)を利用する。
合成可能レンダリングと3次元パラメトリックモデルの両方の利点を生かして,本手法は完全に制御可能である。
論文 参考訳(メタデータ) (2021-10-22T12:40:09Z) - 3DBooSTeR: 3D Body Shape and Texture Recovery [76.91542440942189]
3DBooSTeRは、部分的な3Dスキャンからテクスチャ化された3Dボディメッシュを復元する新しい方法である。
提案手法は形状とテクスチャの完成を2つの逐次的なタスクに分解する。
論文 参考訳(メタデータ) (2020-10-23T21:07:59Z) - Combining Implicit Function Learning and Parametric Models for 3D Human
Reconstruction [123.62341095156611]
深層学習近似として表される暗黙の関数は、3次元曲面の再構成に強力である。
このような機能は、コンピュータグラフィックスとコンピュータビジョンの両方に柔軟なモデルを構築するのに不可欠である。
詳細に富んだ暗黙関数とパラメトリック表現を組み合わせた方法論を提案する。
論文 参考訳(メタデータ) (2020-07-22T13:46:14Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。