論文の概要: SIDER: Single-Image Neural Optimization for Facial Geometric Detail
Recovery
- arxiv url: http://arxiv.org/abs/2108.05465v1
- Date: Wed, 11 Aug 2021 22:34:53 GMT
- ステータス: 処理完了
- システム内更新日: 2021-08-14 02:59:03.185355
- Title: SIDER: Single-Image Neural Optimization for Facial Geometric Detail
Recovery
- Title(参考訳): SIDER:顔の幾何学的詳細回復のための単一画像ニューラル最適化
- Authors: Aggelina Chatziagapi, ShahRukh Athar, Francesc Moreno-Noguer, Dimitris
Samaras
- Abstract要約: SIDERは、教師なしの方法で単一の画像から詳細な顔形状を復元する新しい光度最適化手法である。
以前の作業とは対照的に、SIDERはデータセットの事前に依存せず、複数のビュー、照明変更、地上の真実の3D形状から追加の監視を必要としない。
- 参考スコア(独自算出の注目度): 54.64663713249079
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: We present SIDER(Single-Image neural optimization for facial geometric DEtail
Recovery), a novel photometric optimization method that recovers detailed
facial geometry from a single image in an unsupervised manner. Inspired by
classical techniques of coarse-to-fine optimization and recent advances in
implicit neural representations of 3D shape, SIDER combines a geometry prior
based on statistical models and Signed Distance Functions (SDFs) to recover
facial details from single images. First, it estimates a coarse geometry using
a morphable model represented as an SDF. Next, it reconstructs facial geometry
details by optimizing a photometric loss with respect to the ground truth
image. In contrast to prior work, SIDER does not rely on any dataset priors and
does not require additional supervision from multiple views, lighting changes
or ground truth 3D shape. Extensive qualitative and quantitative evaluation
demonstrates that our method achieves state-of-the-art on facial geometric
detail recovery, using only a single in-the-wild image.
- Abstract(参考訳): 顔画像からの詳細な顔形状を教師なしで復元する新しい光度最適化手法であるSIDER(Single-Image Neural Optimization for facial geometry Detail Recovery)を提案する。
サース・トゥ・ファインメントの古典的な技法と最近の3次元形状の暗黙の神経表現の進歩にインスパイアされたSIDERは、統計モデルと符号付き距離関数(SDF)に基づく幾何を組み合わせて、単一の画像から顔の詳細を復元する。
まず、SDFとして表される変形可能なモデルを用いて粗い幾何学を推定する。
次に、基底真理画像に対する測光損失を最適化することにより、顔形状の詳細を再構築する。
以前の作業とは対照的に、SIDERはデータセットの事前に依存せず、複数のビュー、照明変更、地上の真実の3D形状から追加の監視を必要としない。
広汎な質的,定量的評価により,術中画像のみを用いて顔の幾何学的ディテールを再現する手法が得られた。
関連論文リスト
- G-NeRF: Geometry-enhanced Novel View Synthesis from Single-View Images [45.66479596827045]
我々は,幾何誘導多視点合成手法により,幾何先行性を高めるための幾何強調型NeRF(G-NeRF)を提案する。
単一視点画像に対する多視点監視の欠如に対処するために,深度認識型トレーニングアプローチを設計する。
論文 参考訳(メタデータ) (2024-04-11T04:58:18Z) - A Hierarchical Representation Network for Accurate and Detailed Face
Reconstruction from In-The-Wild Images [15.40230841242637]
本稿では,1つの画像から正確な顔再構成を実現するために,新しい階層型表現ネットワーク(HRN)を提案する。
我々のフレームワークは、異なるビューの詳細な一貫性を考慮し、マルチビューに拡張することができる。
本手法は,再現精度と視覚効果の両方において既存手法より優れる。
論文 参考訳(メタデータ) (2023-02-28T09:24:36Z) - SIRA: Relightable Avatars from a Single Image [19.69326772087838]
SIRAは人間の頭部アバターを高忠実度な形状と分解光と表面材料で再構成する手法である。
我々の重要な要素は、単視点3次元表面再構成と外観分解のあいまいさを解消するニューラルネットワークに基づく2つのデータ駆動統計モデルである。
論文 参考訳(メタデータ) (2022-09-07T09:47:46Z) - Facial Geometric Detail Recovery via Implicit Representation [147.07961322377685]
そこで本研究では,一眼の顔画像のみを用いて,テクスチャガイドを用いた幾何的細部復元手法を提案する。
提案手法は,高品質なテクスチャ補完と暗黙の面の強力な表現性を組み合わせたものである。
本手法は, 顔の正確な細部を復元するだけでなく, 正常部, アルベド部, シェーディング部を自己監督的に分解する。
論文 参考訳(メタデータ) (2022-03-18T01:42:59Z) - AvatarMe++: Facial Shape and BRDF Inference with Photorealistic
Rendering-Aware GANs [119.23922747230193]
そこで本研究では,レンダリング可能な3次元顔形状とBRDFの再構成を,単一の"in-the-wild"画像から実現した最初の手法を提案する。
本手法は,1枚の低解像度画像から,高解像度の3次元顔の再構成を行う。
論文 参考訳(メタデータ) (2021-12-11T11:36:30Z) - Implicit Neural Deformation for Multi-View Face Reconstruction [43.88676778013593]
マルチビューRGB画像から新しい3次元顔再構成法を提案する。
従来の3次元形態素モデルに基づく手法とは異なり,本手法は暗黙の表現を利用してリッチな幾何学的特徴を符号化する。
いくつかのベンチマークデータセットに対する実験結果から,提案手法は代替ベースラインよりも優れ,最先端の手法に比べて優れた顔再構成結果が得られることが示された。
論文 参考訳(メタデータ) (2021-12-05T07:02:53Z) - Fast-GANFIT: Generative Adversarial Network for High Fidelity 3D Face
Reconstruction [76.1612334630256]
我々は、GAN(Generative Adversarial Networks)とDCNN(Deep Convolutional Neural Networks)の力を利用して、単一画像から顔のテクスチャと形状を再構築する。
3次元顔再構成を保存したフォトリアリスティックでアイデンティティに優れた結果を示し, 初めて, 高精度な顔テクスチャ再構成を実現する。
論文 参考訳(メタデータ) (2021-05-16T16:35:44Z) - Inverting Generative Adversarial Renderer for Face Reconstruction [58.45125455811038]
本稿では,GAR(Generative Adversa Renderer)について紹介する。
GARは、グラフィックルールに頼るのではなく、複雑な現実世界のイメージをモデル化することを学ぶ。
本手法は,複数顔再構成における最先端性能を実現する。
論文 参考訳(メタデータ) (2021-05-06T04:16:06Z) - Learning 3D Face Reconstruction with a Pose Guidance Network [49.13404714366933]
ポーズ誘導ネットワーク(PGN)を用いた単眼3次元顔再構成学習のための自己指導型学習手法を提案する。
まず,従来のパラメトリックな3次元顔の学習手法におけるポーズ推定のボトルネックを明らかにし,ポーズパラメータの推定に3次元顔のランドマークを活用することを提案する。
我々のデザインしたPGNでは、完全にラベル付けされた3Dランドマークと無制限にラベル付けされた未使用の顔画像で両方の顔から学習できる。
論文 参考訳(メタデータ) (2020-10-09T06:11:17Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。