論文の概要: Face Hallucination with Finishing Touches
- arxiv url: http://arxiv.org/abs/2002.03308v2
- Date: Wed, 28 Oct 2020 03:10:44 GMT
- ステータス: 処理完了
- システム内更新日: 2023-01-02 14:44:17.578558
- Title: Face Hallucination with Finishing Touches
- Title(参考訳): 仕上げ感のある顔幻覚
- Authors: Yang Zhang, Ivor W.Tsang, Jun Li, Ping Liu, Xiaobo Lu, and Xin Yu
- Abstract要約: 本稿では,超解像とフロンティア化を同時に行うVivid Face Hallucination Generative Adversarial Network (VividGAN)を提案する。
VividGANは粗いレベルと細かなレベルのFace Hallucination Networks (FHnet)と、粗いDとファインDの2つの識別器で構成されている。
実験により、VvidGANは、フォトリアリスティックな正面HR面を達成し、下流タスクにおいて優れた性能を達成できることが示された。
- 参考スコア(独自算出の注目度): 65.14864257585835
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Obtaining a high-quality frontal face image from a low-resolution (LR)
non-frontal face image is primarily important for many facial analysis
applications. However, mainstreams either focus on super-resolving near-frontal
LR faces or frontalizing non-frontal high-resolution (HR) faces. It is
desirable to perform both tasks seamlessly for daily-life unconstrained face
images. In this paper, we present a novel Vivid Face Hallucination Generative
Adversarial Network (VividGAN) for simultaneously super-resolving and
frontalizing tiny non-frontal face images. VividGAN consists of coarse-level
and fine-level Face Hallucination Networks (FHnet) and two discriminators,
i.e., Coarse-D and Fine-D. The coarse-level FHnet generates a frontal coarse HR
face and then the fine-level FHnet makes use of the facial component appearance
prior, i.e., fine-grained facial components, to attain a frontal HR face image
with authentic details. In the fine-level FHnet, we also design a facial
component-aware module that adopts the facial geometry guidance as clues to
accurately align and merge the frontal coarse HR face and prior information.
Meanwhile, two-level discriminators are designed to capture both the global
outline of a face image as well as detailed facial characteristics. The
Coarse-D enforces the coarsely hallucinated faces to be upright and complete
while the Fine-D focuses on the fine hallucinated ones for sharper details.
Extensive experiments demonstrate that our VividGAN achieves photo-realistic
frontal HR faces, reaching superior performance in downstream tasks, i.e., face
recognition and expression classification, compared with other state-of-the-art
methods.
- Abstract(参考訳): 低解像度(lr)非前面画像から高品質の正面画像を得ることは、多くの顔分析アプリケーションにおいて重要となる。
しかし、主流は超解像に近いLR面や、非正面高解像度(HR)面に焦点をあてている。
日常の制約のない顔画像に対して、両タスクをシームレスに実行することが望ましい。
本稿では, 顔画像の超解像化とフロンティア化を同時に行う, Vivid Face Hallucination Generative Adversarial Network (VividGAN) を提案する。
VividGANは粗いレベルと細かなレベルのFace Hallucination Networks (FHnet)と、粗いDとファインDの2つの識別器で構成される。
粗いレベルFHnetは、前部粗いHR顔を生成し、その後、微細レベルFHnetは、前部粗い顔成分、すなわち、きめ細かい顔成分を利用して、真正な詳細で前部粗いHR顔画像を得る。
ファインレベルFHnetでは、正面粗いHR顔と事前情報とを正確に整合・統合するための手がかりとして、顔形状誘導を用いた顔成分認識モジュールを設計する。
一方、2段階の判別器は、顔画像の全体輪郭と詳細な顔の特徴の両方を捉えるように設計されている。
粗いdは粗い幻覚面を直立させて完成させ、細かいdは細かい幻覚面に焦点を当てて細部を鋭くする。
広汎な実験により、我々のVividGANは、他の最先端手法と比較して、下流タスク、すなわち顔認識と表現の分類において優れたパフォーマンスを達成できることを示した。
関連論文リスト
- A Generalist FaceX via Learning Unified Facial Representation [77.74407008931486]
FaceXは、多様な顔タスクを同時に処理できる新しい顔ジェネラリストモデルである。
汎用的なFaceXは、一般的な顔編集タスクの精巧なタスク特化モデルと比較して、競争性能が向上する。
論文 参考訳(メタデータ) (2023-12-31T17:41:48Z) - Enhancing Quality of Pose-varied Face Restoration with Local Weak
Feature Sensing and GAN Prior [29.17397958948725]
本稿では,前向きに顔の再生を行うブラインド・フェイス・リカバリ・ネットワークを提案する。
我々のモデルは、顔の復元や顔の超解像処理において、従来の技術よりも優れている。
論文 参考訳(メタデータ) (2022-05-28T09:23:48Z) - Identity-Preserving Pose-Robust Face Hallucination Through Face Subspace
Prior [14.353574903736343]
新たな顔超解像法が導入され、幻覚した顔は、利用可能な訓練面に散らばった部分空間に置かれざるを得なくなる。
3次元辞書アライメント方式も提示され、アルゴリズムは制御不能な条件下での低解像度の顔の処理が可能となる。
いくつかのよく知られた顔データセットに対して行われた広範囲な実験において、提案アルゴリズムは、詳細で地上に近い真理結果を生成することにより、顕著な性能を示す。
論文 参考訳(メタデータ) (2021-11-20T17:08:38Z) - Pro-UIGAN: Progressive Face Hallucination from Occluded Thumbnails [53.080403912727604]
Inpainting Generative Adversarial Network, Pro-UIGANを提案する。
顔の形状を利用して、隠された小さな顔の補充とアップサンプリング(8*)を行う。
Pro-UIGANは、HR面を視覚的に満足させ、下流タスクにおいて優れたパフォーマンスを達成する。
論文 参考訳(メタデータ) (2021-08-02T02:29:24Z) - Joint Face Image Restoration and Frontalization for Recognition [79.78729632975744]
現実世界のシナリオでは、大きなポーズ、悪い照明、低解像度、ぼやけ、ノイズなど、多くの要因が顔認識性能を損なう可能性がある。
それまでの努力は通常、まず品質の低い顔から高品質な顔に復元し、次に顔認識を行う。
与えられた低品質の顔からフロンダル化された高品質の顔を復元する多段階顔復元モデルを提案する。
論文 参考訳(メタデータ) (2021-05-12T03:52:41Z) - Face Hallucination via Split-Attention in Split-Attention Network [58.30436379218425]
畳み込みニューラルネットワーク(CNN)は、顔幻覚を促進するために広く用いられている。
顔の全体像とテクスチャの細部を同時に考慮し,新たな内部分割注意グループ(ESAG)を提案する。
これら2つの経路から特徴を融合させることにより、顔の構造の整合性と顔の詳細の忠実度が強化される。
論文 参考訳(メタデータ) (2020-10-22T10:09:31Z) - Face Super-Resolution Guided by 3D Facial Priors [92.23902886737832]
シャープな顔構造を把握した3次元顔先行情報を明示的に組み込んだ新しい顔超解像法を提案する。
我々の研究は、顔属性のパラメトリック記述の融合に基づく3次元形態的知識を初めて探求したものである。
提案した3D先行画像は、最先端技術よりも優れた顔超解像結果が得られる。
論文 参考訳(メタデータ) (2020-07-18T15:26:07Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。