論文の概要: Hierarchical Conditional Flow: A Unified Framework for Image
Super-Resolution and Image Rescaling
- arxiv url: http://arxiv.org/abs/2108.05301v1
- Date: Wed, 11 Aug 2021 16:11:01 GMT
- ステータス: 処理完了
- システム内更新日: 2021-08-12 13:25:58.386029
- Title: Hierarchical Conditional Flow: A Unified Framework for Image
Super-Resolution and Image Rescaling
- Title(参考訳): 階層的条件流:画像超解法と画像再スケーリングのための統一フレームワーク
- Authors: Jingyun Liang, Andreas Lugmayr, Kai Zhang, Martin Danelljan, Luc Van
Gool, Radu Timofte
- Abstract要約: 画像SRと画像再スケーリングのための統合フレームワークとして階層的条件フロー(HCFlow)を提案する。
HCFlowは、LR画像と残りの高周波成分の分布を同時にモデル化することにより、HRとLR画像ペア間のマッピングを学習する。
さらに性能を高めるために、知覚的損失やGAN損失などの他の損失と、トレーニングで一般的に使用される負の対数類似損失とを組み合わせる。
- 参考スコア(独自算出の注目度): 139.25215100378284
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: Normalizing flows have recently demonstrated promising results for low-level
vision tasks. For image super-resolution (SR), it learns to predict diverse
photo-realistic high-resolution (HR) images from the low-resolution (LR) image
rather than learning a deterministic mapping. For image rescaling, it achieves
high accuracy by jointly modelling the downscaling and upscaling processes.
While existing approaches employ specialized techniques for these two tasks, we
set out to unify them in a single formulation. In this paper, we propose the
hierarchical conditional flow (HCFlow) as a unified framework for image SR and
image rescaling. More specifically, HCFlow learns a bijective mapping between
HR and LR image pairs by modelling the distribution of the LR image and the
rest high-frequency component simultaneously. In particular, the high-frequency
component is conditional on the LR image in a hierarchical manner. To further
enhance the performance, other losses such as perceptual loss and GAN loss are
combined with the commonly used negative log-likelihood loss in training.
Extensive experiments on general image SR, face image SR and image rescaling
have demonstrated that the proposed HCFlow achieves state-of-the-art
performance in terms of both quantitative metrics and visual quality.
- Abstract(参考訳): 正規化フローは近年,低レベルの視覚タスクに対して有望な結果を示している。
画像超解像(SR)では、決定論的マッピングを学ぶのではなく、低解像度(LR)画像から多彩なフォトリアリスティック高分解能(HR)画像を予測する。
画像再スケーリングでは、ダウンスケーリングとアップスケーリングのプロセスを共同でモデル化することで高い精度を達成する。
既存のアプローチではこれら2つのタスクに特別なテクニックを取り入れていますが、私たちはそれらを単一の定式化で統一することにしました。
本稿では,画像SRと画像再スケーリングのための統合フレームワークとして階層的条件フロー(HCFlow)を提案する。
より具体的には、HCFlowは、LR画像と残りの高周波成分の分布を同時にモデル化することにより、HRとLR画像対の単射マッピングを学習する。
特に、高周波成分は、階層的にLR画像に条件付きである。
さらに性能を高めるために、知覚的損失やGAN損失などの他の損失と、トレーニングで一般的に使用される負の対数類似損失とを組み合わせる。
一般画像SR, 顔画像SR, 画像再スケーリングに関する大規模な実験により, 提案したHCFlowは, 定量的な測定値と視覚的品質の両方の観点から, 最先端の性能を達成することを示した。
関連論文リスト
- Efficient Test-Time Adaptation for Super-Resolution with Second-Order
Degradation and Reconstruction [62.955327005837475]
画像超解像(SR)は,低分解能(LR)から高分解能(HR)へのマッピングを,一対のHR-LRトレーニング画像を用いて学習することを目的としている。
SRTTAと呼ばれるSRの効率的なテスト時間適応フレームワークを提案し、SRモデルを異なる/未知の劣化型でテストドメインに迅速に適応させることができる。
論文 参考訳(メタデータ) (2023-10-29T13:58:57Z) - Learning Many-to-Many Mapping for Unpaired Real-World Image
Super-resolution and Downscaling [60.80788144261183]
実世界のLR画像とHR画像の双方向多対多マッピングを教師なしで同時に学習するSDFlowと呼ばれる画像ダウンスケーリングとSRモデルを提案する。
実世界の画像SRデータセットによる実験結果から,SDFlowは定量的かつ定性的に,多様な現実的なLRとSRの画像を生成可能であることが示唆された。
論文 参考訳(メタデータ) (2023-10-08T01:48:34Z) - Real Image Super-Resolution using GAN through modeling of LR and HR
process [20.537597542144916]
LRモデルとSRモデルに組み込んだ学習可能な適応正弦波非線形性を提案し,分解分布を直接学習する。
定量的および定性的な実験において提案手法の有効性を実証する。
論文 参考訳(メタデータ) (2022-10-19T09:23:37Z) - Enhancing Image Rescaling using Dual Latent Variables in Invertible
Neural Network [42.18106162158025]
画像ダウンスケーリングプロセスのバリエーションをモデル化するために、新しいダウンスケーリング潜在変数が導入された。
これにより、ダウンスケールのLR画像の画質を犠牲にすることなく、画像のアップスケーリング精度を一貫して向上させることができる。
また、画像隠蔽のような画像復元アプリケーションのための他の INN ベースのモデルの拡張にも有効であることが示されている。
論文 参考訳(メタデータ) (2022-07-24T23:12:51Z) - Hierarchical Similarity Learning for Aliasing Suppression Image
Super-Resolution [64.15915577164894]
エイリアスの影響を抑制するために階層画像超解像ネットワーク(HSRNet)を提案する。
HSRNetは、他の作品よりも定量的かつ視覚的なパフォーマンスを向上し、エイリアスをより効果的に再送信する。
論文 参考訳(メタデータ) (2022-06-07T14:55:32Z) - Real-World Super-Resolution of Face-Images from Surveillance Cameras [25.258587196435464]
本稿では,現実的なLR/HRトレーニングペアを生成するための新しいフレームワークを提案する。
本フレームワークは、実写のぼやけたカーネル、ノイズ分布、JPEG圧縮アーチファクトを推定し、ソース領域のものと類似した画像特性を持つLR画像を生成する。
我々はGANベースのSRモデルを用いて、よく使われるVGG-loss[24]とLPIPS-loss[52]を交換した。
論文 参考訳(メタデータ) (2021-02-05T11:38:30Z) - Frequency Consistent Adaptation for Real World Super Resolution [64.91914552787668]
実シーンにスーパーリゾリューション(SR)法を適用する際に周波数領域の整合性を保証する新しい周波数一貫性適応(FCA)を提案する。
監視されていない画像から劣化カーネルを推定し、対応するLow-Resolution (LR)画像を生成する。
ドメイン一貫性のあるLR-HRペアに基づいて、容易に実装可能な畳み込みニューラルネットワーク(CNN)SRモデルを訓練する。
論文 参考訳(メタデータ) (2020-12-18T08:25:39Z) - SRFlow: Learning the Super-Resolution Space with Normalizing Flow [176.07982398988747]
超解像度は、与えられた低解像度画像の複数の予測を可能にするため、不適切な問題である。
出力の条件分布を学習できる正規化フローベース超解法SRFlowを提案する。
我々のモデルは、単一損失、すなわち負のログ類似度を用いて、原則的に訓練されている。
論文 参考訳(メタデータ) (2020-06-25T06:34:04Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。