論文の概要: Adaptive 3D Face Reconstruction from a Single Image
- arxiv url: http://arxiv.org/abs/2007.03979v2
- Date: Sun, 13 Sep 2020 07:29:24 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-12 13:14:33.356405
- Title: Adaptive 3D Face Reconstruction from a Single Image
- Title(参考訳): 単一画像からの適応的3次元顔再構成
- Authors: Kun Li, Jing Yang, Nianhong Jiao, Jinsong Zhang, and Yu-Kun Lai
- Abstract要約: 1枚の画像から3次元の顔形状を適応的に再構成する新しい関節2Dと3Dの最適化法を提案する。
複数のデータセットに対する実験結果から,本手法は1枚のカラー画像から高品質な再構成を実現できることが示された。
- 参考スコア(独自算出の注目度): 45.736818498242016
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: 3D face reconstruction from a single image is a challenging problem,
especially under partial occlusions and extreme poses. This is because the
uncertainty of the estimated 2D landmarks will affect the quality of face
reconstruction. In this paper, we propose a novel joint 2D and 3D optimization
method to adaptively reconstruct 3D face shapes from a single image, which
combines the depths of 3D landmarks to solve the uncertain detections of
invisible landmarks. The strategy of our method involves two aspects: a
coarse-to-fine pose estimation using both 2D and 3D landmarks, and an adaptive
2D and 3D re-weighting based on the refined pose parameter to recover accurate
3D faces. Experimental results on multiple datasets demonstrate that our method
can generate high-quality reconstruction from a single color image and is
robust for self-occlusion and large poses.
- Abstract(参考訳): 一つの画像からの3D顔の再構成は、特に部分閉塞と極端なポーズ下では難しい問題である。
これは、推定2次元ランドマークの不確かさが顔の復元の質に影響を与えるためである。
本論文では,3次元ランドマークの奥行きを組み合わせることで,見えないランドマークの検出を不確かに解決する,1枚の画像から3次元顔形状を適応的に再構成する2次元および3次元共同最適化手法を提案する。
本手法は,2次元と3次元の両方のランドマークを用いた粗いポーズ推定と,精密なポーズパラメータに基づく適応的な2次元と3次元の再重み付けという2つの側面を含む。
複数のデータセットを用いた実験の結果,単一のカラー画像から高品質な再構成が可能であり,自己完結と大きなポーズに頑健であることが判明した。
関連論文リスト
- Disjoint Pose and Shape for 3D Face Reconstruction [4.096453902709292]
本稿では,ポーズと形状の相違を解消し,最適化を安定かつ正確にするためのエンドツーエンドパイプラインを提案する。
提案手法は, エンドツーエンドのトポロジ的整合性を実現し, 反復的な顔ポーズ改善を可能とし, 定量的および定性的な結果の両面で顕著な改善を示した。
論文 参考訳(メタデータ) (2023-08-26T15:18:32Z) - LIST: Learning Implicitly from Spatial Transformers for Single-View 3D
Reconstruction [5.107705550575662]
Listは、局所的およびグローバルな画像特徴を活用して、単一の画像から3Dオブジェクトの幾何学的および位相的構造を再構築する、新しいニューラルネットワークである。
合成画像と実世界の画像から3Dオブジェクトを再構成する際のモデルの有用性を示す。
論文 参考訳(メタデータ) (2023-07-23T01:01:27Z) - RAFaRe: Learning Robust and Accurate Non-parametric 3D Face
Reconstruction from Pseudo 2D&3D Pairs [13.11105614044699]
単視3次元顔再構成(SVFR)のための頑健で正確な非パラメトリック手法を提案する。
大規模な擬似2D&3Dデータセットは、まず詳細な3D顔をレンダリングし、野生の画像の顔と描画された顔とを交換することによって作成される。
本モデルは,FaceScape-wild/labおよびMICCベンチマークにおいて,従来の手法よりも優れていた。
論文 参考訳(メタデータ) (2023-02-10T19:40:26Z) - Deep-MDS Framework for Recovering the 3D Shape of 2D Landmarks from a
Single Image [8.368476827165114]
本稿では,人間の顔上の2次元ランドマークの3次元形状を,単一の入力画像で再現する枠組みを提案する。
ディープニューラルネットワークは、NMDSアプローチで使用される2Dランドマーク間のペアの相似性を学習する。
論文 参考訳(メタデータ) (2022-10-27T06:20:10Z) - Perspective Reconstruction of Human Faces by Joint Mesh and Landmark
Regression [89.8129467907451]
本研究では,世界空間の3次元顔メッシュを同時に再構築し,画像平面上の2次元顔のランドマークを予測することを提案する。
予測された3Dおよび2Dランドマークに基づいて、6DF (6 Degrees Freedom)フェイスポーズを解決者により容易に推定することができる。
論文 参考訳(メタデータ) (2022-08-15T12:32:20Z) - RiCS: A 2D Self-Occlusion Map for Harmonizing Volumetric Objects [68.85305626324694]
カメラ空間における光マーチング (RiCS) は、3次元における前景物体の自己閉塞を2次元の自己閉塞マップに表現する新しい手法である。
表現マップは画像の質を高めるだけでなく,時間的コヒーレントな複雑な影効果をモデル化できることを示す。
論文 参考訳(メタデータ) (2022-05-14T05:35:35Z) - Towards 3D Face Reconstruction in Perspective Projection: Estimating
6DoF Face Pose from Monocular Image [48.77844225075744]
顔がカメラに非常に近い、あるいはカメラ軸に沿って動くいくつかのシナリオでは、この手法は不正確な再構築と不安定な時間的適合に悩まされる。
深層ニューラルネットワークであるPerspNet(PerspNet)は、標準空間における3次元顔形状を同時に再構築するために提案されている。
我々は、視点投影のシナリオ下での3次元顔再構成ソリューションのトレーニングと評価を可能にするために、大規模なARKitFaceデータセットをコントリビュートする。
論文 参考訳(メタデータ) (2022-05-09T08:49:41Z) - 3D Magic Mirror: Clothing Reconstruction from a Single Image via a
Causal Perspective [96.65476492200648]
本研究は, 自己監督型3D衣料の再構築手法について検討することを目的とする。
1枚の2D画像から人間の衣服の形状やテクスチャを復元する。
論文 参考訳(メタデータ) (2022-04-27T17:46:55Z) - Beyond 3DMM: Learning to Capture High-fidelity 3D Face Shape [77.95154911528365]
3Dモーフィブルモデル(3DMM)の適合性は、その強力な3D先行性のため、顔解析に広く有用である。
以前に再建された3次元顔は、微細な形状が失われるため、視差の低下に悩まされていた。
本論文は, パーソナライズされた形状が対応する人物と同一に見えるよう, パーソナライズされた形状を捉えるための完全な解を提案する。
論文 参考訳(メタデータ) (2022-04-09T03:46:18Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。