論文の概要: Implicit Subspace Prior Learning for Dual-Blind Face Restoration
- arxiv url: http://arxiv.org/abs/2010.05508v1
- Date: Mon, 12 Oct 2020 08:04:24 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-08 07:16:23.637959
- Title: Implicit Subspace Prior Learning for Dual-Blind Face Restoration
- Title(参考訳): 二重ブラインド顔復元のための暗黙のサブスペース事前学習
- Authors: Lingbo Yang, Pan Wang, Zhanning Gao, Shanshe Wang, Peiran Ren, Siwei
Ma, Wen Gao
- Abstract要約: 新しい暗黙的サブスペース事前学習(ISPL)フレームワークが、二重盲顔復元の一般的な解決策として提案されている。
実験の結果,既存の最先端手法に対するISPLの認識歪改善が顕著であった。
- 参考スコア(独自算出の注目度): 66.67059961379923
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: Face restoration is an inherently ill-posed problem, where additional prior
constraints are typically considered crucial for mitigating such pathology.
However, real-world image prior are often hard to simulate with precise
mathematical models, which inevitably limits the performance and generalization
ability of existing prior-regularized restoration methods. In this paper, we
study the problem of face restoration under a more practical ``dual blind''
setting, i.e., without prior assumptions or hand-crafted regularization terms
on the degradation profile or image contents.
To this end, a novel implicit subspace prior learning (ISPL) framework is
proposed as a generic solution to dual-blind face restoration, with two key
elements: 1) an implicit formulation to circumvent the ill-defined restoration
mapping and 2) a subspace prior decomposition and fusion mechanism to
dynamically handle inputs at varying degradation levels with consistent
high-quality restoration results.
Experimental results demonstrate significant perception-distortion
improvement of ISPL against existing state-of-the-art methods for a variety of
restoration subtasks, including a 3.69db PSNR and 45.8% FID gain against
ESRGAN, the 2018 NTIRE SR challenge winner. Overall, we prove that it is
possible to capture and utilize prior knowledge without explicitly formulating
it, which will help inspire new research paradigms towards low-level vision
tasks.
- Abstract(参考訳): 顔の復元は本質的に不適切な問題であり、そのような病理の緩和には、通常、追加の事前制約が不可欠であると考えられている。
しかし、実世界の画像先行は、既存の事前正規化復元法の性能と一般化能力を必然的に制限する、正確な数学的モデルでシミュレートすることが難しいことが多い。
本稿では,より実用的な「双盲」設定,すなわち,劣化プロファイルや画像内容の事前仮定や手作り正規化条件を伴わない顔復元の問題について検討する。
この目的のために、2つの重要な要素を持つ双盲顔復元の汎用解として,新しい暗黙的部分空間事前学習(ispl)フレームワークが提案されている。
1)不明確な復元マッピングを回避するための暗黙の定式化
2) 劣化レベルの異なる入力を一貫した高品質な復元結果で動的に処理する部分空間事前分解・融合機構。
実験の結果、2018年のNTIRE SRチャレンジの勝者であるESRGANに対する3.69dbのPSNRと45.8%のFIDゲインを含む、様々な修復サブタスクに対する既存の最先端の手法に対するISPLの認識歪改善が顕著に示された。
全体としては、事前知識を明示的に定式化せずにキャプチャし、活用することが可能であることを証明し、低レベルのビジョンタスクに対する新たな研究パラダイムの促進に役立ちます。
関連論文リスト
- PromptHSI: Universal Hyperspectral Image Restoration Framework for Composite Degradation [28.10512516485237]
本稿では,初のユニバーサルAiO HSI復元フレームワークであるPromptHSIを提案する。
テキストプロンプトを強度とバイアスコントローラに分解して復元プロセスを導出する。
我々の統合されたアーキテクチャは、きめ細かい回復とグローバルな情報復元の両方に優れています。
論文 参考訳(メタデータ) (2024-11-24T17:08:58Z) - Perceive-IR: Learning to Perceive Degradation Better for All-in-One Image Restoration [33.163161549726446]
Perceive-IRは、微細な画質制御を実現するために設計されたオールインワン画像復元装置である。
素早い学習の段階では、素早い学習を活用し、3段階の品質レベルを識別できるきめ細かい品質知覚器を得る。
修復段階では,修復プロセスをさらに促進するために,意味的誘導モジュールとコンパクトな特徴抽出を提案する。
論文 参考訳(メタデータ) (2024-08-28T17:58:54Z) - DR2: Diffusion-based Robust Degradation Remover for Blind Face
Restoration [66.01846902242355]
ブラインド顔復元は通常、トレーニングのための事前定義された劣化モデルで劣化した低品質データを合成する。
トレーニングデータに現実のケースをカバーするために、あらゆる種類の劣化を含めることは、高価で実現不可能である。
本稿では、まず、劣化した画像を粗いが劣化不変な予測に変換し、次に、粗い予測を高品質な画像に復元するために拡張モジュールを使用するロバスト劣化再帰法(DR2)を提案する。
論文 参考訳(メタデータ) (2023-03-13T06:05:18Z) - A Survey of Deep Face Restoration: Denoise, Super-Resolution, Deblur,
Artifact Removal [177.21001709272144]
顔復元(FR)は、低品質(LQ)入力画像から高品質(HQ)顔を復元することを目的としている。
本稿では,顔修復のための深層学習技術の最近の進歩を包括的に調査する。
論文 参考訳(メタデータ) (2022-11-05T07:08:15Z) - Panini-Net: GAN Prior Based Degradation-Aware Feature Interpolation for
Face Restoration [4.244692655670362]
Panini-Netは、顔修復のための劣化認識機能ネットワークである。
抽象表現を学び、様々な劣化を区別する。
マルチ劣化顔復元と超解像のための最先端性能を実現する。
論文 参考訳(メタデータ) (2022-03-16T07:41:07Z) - Joint Face Image Restoration and Frontalization for Recognition [79.78729632975744]
現実世界のシナリオでは、大きなポーズ、悪い照明、低解像度、ぼやけ、ノイズなど、多くの要因が顔認識性能を損なう可能性がある。
それまでの努力は通常、まず品質の低い顔から高品質な顔に復元し、次に顔認識を行う。
与えられた低品質の顔からフロンダル化された高品質の顔を復元する多段階顔復元モデルを提案する。
論文 参考訳(メタデータ) (2021-05-12T03:52:41Z) - HiFaceGAN: Face Renovation via Collaborative Suppression and
Replenishment [63.333407973913374]
フェース・リノベーション(FR)は意味誘導型生成問題である。
HiFaceGANは、複数のネストされたCSRユニットを含む多段階フレームワークである。
合成画像と実顔画像の両方の実験により,HiFaceGANの優れた性能が確認された。
論文 参考訳(メタデータ) (2020-05-11T11:33:17Z) - Deep Face Super-Resolution with Iterative Collaboration between
Attentive Recovery and Landmark Estimation [92.86123832948809]
本稿では,2つの繰り返しネットワーク間の反復的協調による深層面超解像(FSR)手法を提案する。
各繰り返しステップにおいて、リカバリブランチは、ランドマークの事前の知識を利用して、高品質な画像を生成する。
新しい注意融合モジュールはランドマークマップのガイダンスを強化するために設計されている。
論文 参考訳(メタデータ) (2020-03-29T16:04:48Z) - Joint Face Completion and Super-resolution using Multi-scale Feature
Relation Learning [26.682678558621625]
本稿では,MFG-GAN(MFG-GAN)を用いたマルチスケール機能グラフ生成手法を提案する。
GANに基づいて、MFG-GANはグラフ畳み込みとピラミッドネットワークを統合し、隠蔽された低解像度の顔画像を非隠蔽の高解像度の顔画像に復元する。
パブリックドメインCelebAとHelenデータベースの実験結果から,提案手法は顔超解像(最大4倍または8倍)と顔補完を同時に行う上で,最先端の手法よりも優れていることが示された。
論文 参考訳(メタデータ) (2020-02-29T13:31:46Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。