論文の概要: Super-Resolution of Real-World Faces
- arxiv url: http://arxiv.org/abs/2011.02427v2
- Date: Tue, 8 Feb 2022 03:56:30 GMT
- ステータス: 処理完了
- システム内更新日: 2022-09-29 22:58:47.721805
- Title: Super-Resolution of Real-World Faces
- Title(参考訳): 現実世界の顔の超解像
- Authors: Saurabh Goswami, Aakanksha, Rajagopalan A. N
- Abstract要約: 実の低解像度 (LR) の顔画像は、変わらず複雑で既知のダウンサンプリングカーネルによってキャプチャされる劣化を含んでいる。
本稿では,特徴抽出モジュールがLR画像からロバストな特徴を抽出する2つのモジュール超解像ネットワークを提案する。
我々は、劣化GANを訓練し、双対的に縮小されたクリーン画像を実際の劣化画像に変換し、得られた劣化LR画像と、そのクリーンLR画像とを補間する。
- 参考スコア(独自算出の注目度): 3.4376560669160394
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Real low-resolution (LR) face images contain degradations which are too
varied and complex to be captured by known downsampling kernels and
signal-independent noises. So, in order to successfully super-resolve real
faces, a method needs to be robust to a wide range of noise, blur, compression
artifacts etc. Some of the recent works attempt to model these degradations
from a dataset of real images using a Generative Adversarial Network (GAN).
They generate synthetically degraded LR images and use them with corresponding
real high-resolution(HR) image to train a super-resolution (SR) network using a
combination of a pixel-wise loss and an adversarial loss. In this paper, we
propose a two module super-resolution network where the feature extractor
module extracts robust features from the LR image, and the SR module generates
an HR estimate using only these robust features. We train a degradation GAN to
convert bicubically downsampled clean images to real degraded images, and
interpolate between the obtained degraded LR image and its clean LR
counterpart. This interpolated LR image is then used along with it's
corresponding HR counterpart to train the super-resolution network from end to
end. Entropy Regularized Wasserstein Divergence is used to force the encoded
features learnt from the clean and degraded images to closely resemble those
extracted from the interpolated image to ensure robustness.
- Abstract(参考訳): 実際の低解像度 (LR) の顔画像には、既知のダウンサンプリングカーネルや信号非依存ノイズによって捉えられるほど多様で複雑な劣化が含まれている。
したがって、実際の顔の超解法を成功させるためには、幅広いノイズ、ぼかし、圧縮アーティファクトなどに対して堅牢な方法が必要である。
最近の研究は、GAN(Generative Adversarial Network)を使用して、実際の画像のデータセットからこれらの劣化をモデル化しようとしている。
合成劣化LR画像を生成し、対応する実高分解能(HR)画像を用いて、画素ワイドロスと対角損失の組み合わせを用いて超高分解能(SR)ネットワークを訓練する。
本稿では,特徴抽出モジュールがLR画像からロバスト特徴を抽出する2つのモジュール超解像ネットワークを提案し,SRモジュールはこれらのロバスト特徴のみを用いてHR推定を生成する。
我々は、劣化GANを訓練し、双対的に縮小されたクリーン画像を実際の劣化画像に変換し、得られた劣化LR画像とクリーンLR画像との補間を行う。
この補間LR画像は、対応するHRと合わせて、超解像ネットワークを終端から終端までトレーニングする。
Entropy Regularized Wasserstein Divergenceは、クリーンで劣化した画像から学習したエンコードされた特徴を補間された画像から抽出した特徴と密接に類似させ、堅牢性を確保するために使用される。
関連論文リスト
- Learning Many-to-Many Mapping for Unpaired Real-World Image
Super-resolution and Downscaling [60.80788144261183]
実世界のLR画像とHR画像の双方向多対多マッピングを教師なしで同時に学習するSDFlowと呼ばれる画像ダウンスケーリングとSRモデルを提案する。
実世界の画像SRデータセットによる実験結果から,SDFlowは定量的かつ定性的に,多様な現実的なLRとSRの画像を生成可能であることが示唆された。
論文 参考訳(メタデータ) (2023-10-08T01:48:34Z) - Self-Asymmetric Invertible Network for Compression-Aware Image Rescaling [6.861753163565238]
現実世界のアプリケーションでは、ほとんどの画像は伝送のために圧縮される。
圧縮対応画像再スケーリングのための自己非対称可逆ネットワーク(SAIN)を提案する。
論文 参考訳(メタデータ) (2023-03-04T08:33:46Z) - Real Image Super-Resolution using GAN through modeling of LR and HR
process [20.537597542144916]
LRモデルとSRモデルに組み込んだ学習可能な適応正弦波非線形性を提案し,分解分布を直接学習する。
定量的および定性的な実験において提案手法の有効性を実証する。
論文 参考訳(メタデータ) (2022-10-19T09:23:37Z) - Learning Multiple Probabilistic Degradation Generators for Unsupervised
Real World Image Super Resolution [5.987801889633082]
教師なしの現実世界のスーパーレゾリューションは、ペア化されたデータが利用できない場合に、低解像度(LR)入力を与えられた高解像度(HR)イメージを復元することを目的としている。
最も一般的なアプローチの1つは、GANを使ってノイズの多いLR画像を合成し、合成データセットを使用してモデルを教師付きで訓練することである。
HR画像が与えられたLR画像の分布を近似する確率分解生成器を提案する。
論文 参考訳(メタデータ) (2022-01-26T04:49:11Z) - Hierarchical Conditional Flow: A Unified Framework for Image
Super-Resolution and Image Rescaling [139.25215100378284]
画像SRと画像再スケーリングのための統合フレームワークとして階層的条件フロー(HCFlow)を提案する。
HCFlowは、LR画像と残りの高周波成分の分布を同時にモデル化することにより、HRとLR画像ペア間のマッピングを学習する。
さらに性能を高めるために、知覚的損失やGAN損失などの他の損失と、トレーニングで一般的に使用される負の対数類似損失とを組み合わせる。
論文 参考訳(メタデータ) (2021-08-11T16:11:01Z) - LAPAR: Linearly-Assembled Pixel-Adaptive Regression Network for Single
Image Super-Resolution and Beyond [75.37541439447314]
単一画像超解像(SISR)は、低解像度(LR)画像を高解像度(HR)バージョンにアップサンプリングする根本的な問題を扱う。
本稿では,線形組立画素適応回帰ネットワーク (LAPAR) を提案する。
論文 参考訳(メタデータ) (2021-05-21T15:47:18Z) - Designing a Practical Degradation Model for Deep Blind Image
Super-Resolution [134.9023380383406]
単一画像スーパーレゾリューション (sisr) 法は, 推定劣化モデルが実画像から逸脱した場合はうまく動作しない。
本稿では, ランダムにシャッフルされたブラー, ダウンサンプリング, ノイズ劣化からなる, より複雑で実用的な劣化モデルを提案する。
論文 参考訳(メタデータ) (2021-03-25T17:40:53Z) - Frequency Consistent Adaptation for Real World Super Resolution [64.91914552787668]
実シーンにスーパーリゾリューション(SR)法を適用する際に周波数領域の整合性を保証する新しい周波数一貫性適応(FCA)を提案する。
監視されていない画像から劣化カーネルを推定し、対応するLow-Resolution (LR)画像を生成する。
ドメイン一貫性のあるLR-HRペアに基づいて、容易に実装可能な畳み込みニューラルネットワーク(CNN)SRモデルを訓練する。
論文 参考訳(メタデータ) (2020-12-18T08:25:39Z) - Hyperspectral Image Super-resolution via Deep Progressive Zero-centric
Residual Learning [62.52242684874278]
空間情報とスペクトル情報の相互モダリティ分布が問題となる。
本稿では,PZRes-Netという,新しいテクスライトウェイトなディープニューラルネットワークベースのフレームワークを提案する。
本フレームワークは,高分解能かつテクテッセロ中心の残像を学習し,シーンの空間的詳細を高頻度で表現する。
論文 参考訳(メタデータ) (2020-06-18T06:32:11Z) - Deep Generative Adversarial Residual Convolutional Networks for
Real-World Super-Resolution [31.934084942626257]
我々は,超解像残差畳み込み生成共役ネットワーク(SRResCGAN)を提案する。
これは、生成したLRドメインからHRドメインの画素単位の監督でモデルを逆トレーニングすることで、現実世界の劣化設定に従う。
提案するネットワークは,画像の高精細化と凸最適化によるエネルギーベース目的関数の最小化により,残差学習を利用する。
論文 参考訳(メタデータ) (2020-05-03T00:12:38Z) - Unpaired Image Super-Resolution using Pseudo-Supervision [12.18340575383456]
生成逆数ネットワークを用いた非対位画像超解像(SR)手法を提案する。
我々のネットワークは、未ペアカーネル/ノイズ補正ネットワークと擬ペアSRネットワークで構成されている。
多様なデータセットに対する実験により,提案手法は未ペアSR問題に対する既存の解よりも優れていることが示された。
論文 参考訳(メタデータ) (2020-02-26T10:30:52Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。