論文の概要: Joint Generative Learning and Super-Resolution For Real-World
Camera-Screen Degradation
- arxiv url: http://arxiv.org/abs/2008.00195v3
- Date: Mon, 14 Sep 2020 09:22:34 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-04 01:04:52.310047
- Title: Joint Generative Learning and Super-Resolution For Real-World
Camera-Screen Degradation
- Title(参考訳): 実世界のカメラ画面劣化に対する共同生成学習と超解像
- Authors: Guanghao Yin, Shouqian Sun, Chao Li, Xin Min
- Abstract要約: 現実世界の単一画像超解像(SISR)タスクでは、低解像度画像はより複雑な劣化に苦しむ。
本稿では,カメラ画面の劣化に着目し,実世界のデータセット(Cam-ScreenSR)を構築する。
まず、ダウンサンプリング劣化GAN(DD-GAN)をトレーニングし、その分解をモデル化し、より多様なLR画像を生成する。
そして、二重残差チャネルアテンションネットワーク(DuRCAN)がSR画像の復元を学習する。
- 参考スコア(独自算出の注目度): 6.14297871633911
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In real-world single image super-resolution (SISR) task, the low-resolution
image suffers more complicated degradations, not only downsampled by unknown
kernels. However, existing SISR methods are generally studied with the
synthetic low-resolution generation such as bicubic interpolation (BI), which
greatly limits their performance. Recently, some researchers investigate
real-world SISR from the perspective of the camera and smartphone. However,
except the acquisition equipment, the display device also involves more
complicated degradations. In this paper, we focus on the camera-screen
degradation and build a real-world dataset (Cam-ScreenSR), where HR images are
original ground truths from the previous DIV2K dataset and corresponding LR
images are camera-captured versions of HRs displayed on the screen. We conduct
extensive experiments to demonstrate that involving more real degradations is
positive to improve the generalization of SISR models. Moreover, we propose a
joint two-stage model. Firstly, the downsampling degradation GAN(DD-GAN) is
trained to model the degradation and produces more various of LR images, which
is validated to be efficient for data augmentation. Then the dual residual
channel attention network (DuRCAN) learns to recover the SR image. The weighted
combination of L1 loss and proposed Laplacian loss are applied to sharpen the
high-frequency edges. Extensive experimental results in both typical synthetic
and complicated real-world degradations validate the proposed method
outperforms than existing SOTA models with less parameters, faster speed and
better visual results. Moreover, in real captured photographs, our model also
delivers best visual quality with sharper edge, less artifacts, especially
appropriate color enhancement, which has not been accomplished by previous
methods.
- Abstract(参考訳): 現実世界の単一画像超解像(SISR)タスクでは、低解像度画像は未知のカーネルによってサンプリングされるだけでなく、より複雑な劣化に悩まされる。
しかし、既存のSISR法は一般的に、バイコビック補間(BI)のような合成低分解能発生によって研究され、その性能は大幅に制限される。
近年、カメラとスマートフォンの観点から現実世界のSISRを調査している研究者もいる。
しかし、取得機器を除くと、表示装置はより複雑な劣化も伴う。
本稿では,カメラ画面の劣化に着目し,従来のdiv2kデータセットからhr画像がオリジナル・グラウンド・真実であり,対応するlr画像がカメラキャプチャされたhrsである実世界データセット(cam-screensr)を構築する。
我々は、より現実的な劣化を伴うことがSISRモデルの一般化を改善するのに役立つことを示すために、広範な実験を行う。
さらに,共同2段階モデルを提案する。
まず、ダウンサンプリング劣化GAN(DD-GAN)をトレーニングし、その分解をモデル化し、データ増大に有効であることが検証された様々なLR画像を生成する。
そして、二重残差チャネルアテンションネットワーク(DuRCAN)がSR画像の復元を学習する。
高周波エッジを鋭くするためにL1損失とラプラシア損失の重み付けの組み合わせを適用した。
典型的な合成と複雑な実世界の分解の両方の実験結果は、パラメータの少ない既存のsomaモデルよりも優れており、より速い速度とより良い視覚結果が得られる。
また,実写写真では,よりシャープなエッジ,より少ないアーティファクト,特に従来の手法では達成されていない適切なカラーエンハンスメントにより,最高の視覚品質を提供する。
関連論文リスト
- Towards Realistic Data Generation for Real-World Super-Resolution [58.88039242455039]
RealDGenは、現実世界の超解像のために設計された教師なし学習データ生成フレームワークである。
我々は,コンテンツ分解脱結合拡散モデルに統合されたコンテンツと劣化抽出戦略を開発する。
実験により、RealDGenは、現実世界の劣化を反映する大規模で高品質なペアデータを生成するのに優れていることが示された。
論文 参考訳(メタデータ) (2024-06-11T13:34:57Z) - Efficient Test-Time Adaptation for Super-Resolution with Second-Order
Degradation and Reconstruction [62.955327005837475]
画像超解像(SR)は,低分解能(LR)から高分解能(HR)へのマッピングを,一対のHR-LRトレーニング画像を用いて学習することを目的としている。
SRTTAと呼ばれるSRの効率的なテスト時間適応フレームワークを提案し、SRモデルを異なる/未知の劣化型でテストドメインに迅速に適応させることができる。
論文 参考訳(メタデータ) (2023-10-29T13:58:57Z) - Learning Many-to-Many Mapping for Unpaired Real-World Image
Super-resolution and Downscaling [60.80788144261183]
実世界のLR画像とHR画像の双方向多対多マッピングを教師なしで同時に学習するSDFlowと呼ばれる画像ダウンスケーリングとSRモデルを提案する。
実世界の画像SRデータセットによる実験結果から,SDFlowは定量的かつ定性的に,多様な現実的なLRとSRの画像を生成可能であることが示唆された。
論文 参考訳(メタデータ) (2023-10-08T01:48:34Z) - DR2: Diffusion-based Robust Degradation Remover for Blind Face
Restoration [66.01846902242355]
ブラインド顔復元は通常、トレーニングのための事前定義された劣化モデルで劣化した低品質データを合成する。
トレーニングデータに現実のケースをカバーするために、あらゆる種類の劣化を含めることは、高価で実現不可能である。
本稿では、まず、劣化した画像を粗いが劣化不変な予測に変換し、次に、粗い予測を高品質な画像に復元するために拡張モジュールを使用するロバスト劣化再帰法(DR2)を提案する。
論文 参考訳(メタデータ) (2023-03-13T06:05:18Z) - Real Image Super-Resolution using GAN through modeling of LR and HR
process [20.537597542144916]
LRモデルとSRモデルに組み込んだ学習可能な適応正弦波非線形性を提案し,分解分布を直接学習する。
定量的および定性的な実験において提案手法の有効性を実証する。
論文 参考訳(メタデータ) (2022-10-19T09:23:37Z) - Toward Real-world Image Super-resolution via Hardware-based Adaptive
Degradation Models [3.9037347042028254]
ほとんどの単一画像超解像法は、合成低分解能(LR)と高分解能(HR)画像対上で開発されている。
ハードウェアの知識を取り入れた未知の劣化過程をシミュレートする新しい教師付き手法を提案する。
実世界のデータセットを用いた実験により,我々の劣化モデルが所定の劣化操作よりも精度良くLR画像を推定できることが確認された。
論文 参考訳(メタデータ) (2021-10-20T19:53:48Z) - Benefiting from Bicubically Down-Sampled Images for Learning Real-World
Image Super-Resolution [22.339751911637077]
我々は、この不適切な問題を2つの比較的よく提示されたステップに分割することで、現実世界のSRを扱うことを提案する。
まず、実LR画像を教師付きで双対的にダウンサンプリングされた画像の空間に変換するネットワークを訓練する。
次に,2次元ダウンサンプル画像に基づいて学習した汎用SRネットワークを用いて,変換されたLR画像の超解像を行う。
論文 参考訳(メタデータ) (2020-07-06T20:27:58Z) - Deep Generative Adversarial Residual Convolutional Networks for
Real-World Super-Resolution [31.934084942626257]
我々は,超解像残差畳み込み生成共役ネットワーク(SRResCGAN)を提案する。
これは、生成したLRドメインからHRドメインの画素単位の監督でモデルを逆トレーニングすることで、現実世界の劣化設定に従う。
提案するネットワークは,画像の高精細化と凸最適化によるエネルギーベース目的関数の最小化により,残差学習を利用する。
論文 参考訳(メタデータ) (2020-05-03T00:12:38Z) - DDet: Dual-path Dynamic Enhancement Network for Real-World Image
Super-Resolution [69.2432352477966]
実画像超解像(Real-SR)は、実世界の高分解能画像(HR)と低分解能画像(LR)の関係に焦点を当てている。
本稿では,Real-SRのためのデュアルパス動的拡張ネットワーク(DDet)を提案する。
特徴表現のための大規模な畳み込みブロックを積み重ねる従来の手法とは異なり、非一貫性のある画像対を研究するためのコンテンツ認識フレームワークを導入する。
論文 参考訳(メタデータ) (2020-02-25T18:24:51Z) - Characteristic Regularisation for Super-Resolving Face Images [81.84939112201377]
既存の顔画像超解像法(SR)は、主に人工的にダウンサンプリングされた低解像度(LR)画像の改善に焦点を当てている。
従来の非教師なしドメイン適応(UDA)手法は、未ペアの真のLRとHRデータを用いてモデルをトレーニングすることでこの問題に対処する。
これにより、視覚的特徴を構成することと、画像の解像度を高めることの2つのタスクで、モデルをオーバーストレッチする。
従来のSRモデルとUDAモデルの利点を結合する手法を定式化する。
論文 参考訳(メタデータ) (2019-12-30T16:27:24Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。