論文の概要: SelFSR: Self-Conditioned Face Super-Resolution in the Wild via Flow
Field Degradation Network
- arxiv url: http://arxiv.org/abs/2112.10683v1
- Date: Mon, 20 Dec 2021 17:04:00 GMT
- ステータス: 処理完了
- システム内更新日: 2021-12-21 18:21:47.538711
- Title: SelFSR: Self-Conditioned Face Super-Resolution in the Wild via Flow
Field Degradation Network
- Title(参考訳): SelFSR: 流れ場劣化ネットワークによる野生における自己定義型超解像
- Authors: Xianfang Zeng, Jiangning Zhang, Liang Liu, Guangzhong Tian, Yong Liu
- Abstract要約: 野生における顔超解像のための新しいドメイン適応分解ネットワークを提案する。
我々のモデルは,CelebAと実世界の顔データセットの両方で最先端のパフォーマンスを実現する。
- 参考スコア(独自算出の注目度): 12.976199676093442
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: In spite of the success on benchmark datasets, most advanced face
super-resolution models perform poorly in real scenarios since the remarkable
domain gap between the real images and the synthesized training pairs. To
tackle this problem, we propose a novel domain-adaptive degradation network for
face super-resolution in the wild. This degradation network predicts a flow
field along with an intermediate low resolution image. Then, the degraded
counterpart is generated by warping the intermediate image. With the preference
of capturing motion blur, such a model performs better at preserving identity
consistency between the original images and the degraded. We further present
the self-conditioned block for super-resolution network. This block takes the
input image as a condition term to effectively utilize facial structure
information, eliminating the reliance on explicit priors, e.g. facial landmarks
or boundary. Our model achieves state-of-the-art performance on both CelebA and
real-world face dataset. The former demonstrates the powerful generative
ability of our proposed architecture while the latter shows great identity
consistency and perceptual quality in real-world images.
- Abstract(参考訳): ベンチマークデータセットの成功にもかかわらず、ほとんどの先進的なフェイススーパーレゾリューションモデルは、実際の画像と合成されたトレーニングペアの間の顕著なドメインギャップのため、実際のシナリオではパフォーマンスが劣る。
そこで本研究では,野生の超解像のための新しいドメイン適応分解ネットワークを提案する。
この劣化ネットワークは、中間低解像度画像と共に流れ場を予測する。
そして、中間画像をワープして劣化した相手を生成する。
動きのぼやけを捉えることを好むため、そのようなモデルは元の画像と劣化した画像の同一性を維持するのに優れている。
さらに,超解像ネットワーク用セルフコンディショニングブロックについて述べる。
このブロックは、入力画像を条件項として、顔構造情報を有効に活用し、例えば顔ランドマークや境界など、明示的な事前情報への依存をなくす。
我々のモデルは,CelebAと実世界の顔データセットの両方で最先端のパフォーマンスを実現する。
前者は提案するアーキテクチャの強力な生成能力を示し,後者は実世界画像における高いアイデンティティ一貫性と知覚的品質を示している。
関連論文リスト
- Teacher-Student Network for Real-World Face Super-Resolution with Progressive Embedding of Edge Information [2.280954956645056]
実データと合成データの領域ギャップを考慮した,実世界の顔超解像教師学生モデルを提案する。
提案手法は,実世界のFSRにおいて,高品質な顔画像を得るための最先端手法を超越した手法である。
論文 参考訳(メタデータ) (2024-05-08T02:48:52Z) - DGNet: Dynamic Gradient-Guided Network for Water-Related Optics Image
Enhancement [77.0360085530701]
水中画像強調(UIE)は、水中環境によって引き起こされる複雑な劣化のために難しい課題である。
従来の手法では、劣化過程を理想化し、中音や物体の動きが画像の特徴の分布に与える影響を無視することが多い。
提案手法では,予測画像を用いて疑似ラベルを動的に更新し,動的勾配を加えてネットワークの勾配空間を最適化する。
論文 参考訳(メタデータ) (2023-12-12T06:07:21Z) - Distance Weighted Trans Network for Image Completion [52.318730994423106]
本稿では,DWT(Distance-based Weighted Transformer)を利用した画像コンポーネント間の関係をよりよく理解するためのアーキテクチャを提案する。
CNNは、粗い事前の局所的なテクスチャ情報を強化するために使用される。
DWTブロックは、特定の粗いテクスチャやコヒーレントな視覚構造を復元するために使用される。
論文 参考訳(メタデータ) (2023-10-11T12:46:11Z) - Hierarchical Similarity Learning for Aliasing Suppression Image
Super-Resolution [64.15915577164894]
エイリアスの影響を抑制するために階層画像超解像ネットワーク(HSRNet)を提案する。
HSRNetは、他の作品よりも定量的かつ視覚的なパフォーマンスを向上し、エイリアスをより効果的に再送信する。
論文 参考訳(メタデータ) (2022-06-07T14:55:32Z) - Spatially-Adaptive Image Restoration using Distortion-Guided Networks [51.89245800461537]
空間的に変化する劣化に苦しむ画像の復元のための学習ベースソリューションを提案する。
本研究では、歪み局所化情報を活用し、画像中の困難な領域に動的に適応するネットワーク設計であるSPAIRを提案する。
論文 参考訳(メタデータ) (2021-08-19T11:02:25Z) - High Resolution Face Editing with Masked GAN Latent Code Optimization [0.0]
顔の編集はコンピュータビジョンコミュニティで人気のある研究トピックである。
最近の提案手法は、条件付きエンコーダデコーダであるGAN(Generative Adversarial Network)をエンドツーエンドでトレーニングするか、事前に訓練されたバニラGANジェネレータモデルの潜時空間での動作を定義するかのいずれかである。
空間的および意味的制約を伴ったGAN組み込み最適化手順を提案する。
論文 参考訳(メタデータ) (2021-03-20T08:39:41Z) - Perceptual Image Restoration with High-Quality Priori and Degradation
Learning [28.93489249639681]
本モデルは,復元画像と劣化画像の類似度を測定するのに有効であることを示す。
同時修復・拡張フレームワークは,実世界の複雑な分解型によく一般化する。
論文 参考訳(メタデータ) (2021-03-04T13:19:50Z) - Enhanced Residual Networks for Context-based Image Outpainting [0.0]
深いモデルは、保持された情報を通してコンテキストや外挿を理解するのに苦労する。
現在のモデルでは、生成的敵ネットワークを使用して、局所的な画像特徴の整合性が欠如し、偽のように見える結果を生成する。
本稿では,局所的・大域的判別器の使用と,ネットワークの符号化部における残差ブロックの追加という,この問題を改善するための2つの方法を提案する。
論文 参考訳(メタデータ) (2020-05-14T05:14:26Z) - Gated Fusion Network for Degraded Image Super Resolution [78.67168802945069]
本稿では,基本特徴と回復特徴を別々に抽出する二分岐畳み込みニューラルネットワークを提案する。
特徴抽出ステップを2つのタスク非依存ストリームに分解することで、デュアルブランチモデルがトレーニングプロセスを容易にすることができる。
論文 参考訳(メタデータ) (2020-03-02T13:28:32Z) - Joint Face Completion and Super-resolution using Multi-scale Feature
Relation Learning [26.682678558621625]
本稿では,MFG-GAN(MFG-GAN)を用いたマルチスケール機能グラフ生成手法を提案する。
GANに基づいて、MFG-GANはグラフ畳み込みとピラミッドネットワークを統合し、隠蔽された低解像度の顔画像を非隠蔽の高解像度の顔画像に復元する。
パブリックドメインCelebAとHelenデータベースの実験結果から,提案手法は顔超解像(最大4倍または8倍)と顔補完を同時に行う上で,最先端の手法よりも優れていることが示された。
論文 参考訳(メタデータ) (2020-02-29T13:31:46Z) - Image Fine-grained Inpainting [89.17316318927621]
拡張畳み込みの密結合を利用してより大きく効果的な受容場を得る一段階モデルを提案する。
この効率的なジェネレータをよく訓練するために、頻繁に使用されるVGG特徴整合損失を除いて、新しい自己誘導回帰損失を設計する。
また、局所的・グローバルな分枝を持つ識別器を用いて、局所的・グローバルな内容の整合性を確保する。
論文 参考訳(メタデータ) (2020-02-07T03:45:25Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。