論文の概要: Closed-loop Matters: Dual Regression Networks for Single Image
Super-Resolution
- arxiv url: http://arxiv.org/abs/2003.07018v4
- Date: Fri, 22 May 2020 15:57:57 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-23 03:22:33.609042
- Title: Closed-loop Matters: Dual Regression Networks for Single Image
Super-Resolution
- Title(参考訳): 閉ループ問題:単一画像超解法のためのデュアル回帰ネットワーク
- Authors: Yong Guo, Jian Chen, Jingdong Wang, Qi Chen, Jiezhang Cao, Zeshuai
Deng, Yanwu Xu, Mingkui Tan
- Abstract要約: ディープニューラルネットワークは、画像超解像において有望な性能を示した。
これらのネットワークは、低分解能(LR)画像から高分解能(HR)画像への非線形マッピング関数を学習する。
本稿では,可能な関数の空間を削減するために,LRデータに新たな制約を導入することで,二重回帰手法を提案する。
- 参考スコア(独自算出の注目度): 73.86924594746884
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Deep neural networks have exhibited promising performance in image
super-resolution (SR) by learning a nonlinear mapping function from
low-resolution (LR) images to high-resolution (HR) images. However, there are
two underlying limitations to existing SR methods. First, learning the mapping
function from LR to HR images is typically an ill-posed problem, because there
exist infinite HR images that can be downsampled to the same LR image. As a
result, the space of the possible functions can be extremely large, which makes
it hard to find a good solution. Second, the paired LR-HR data may be
unavailable in real-world applications and the underlying degradation method is
often unknown. For such a more general case, existing SR models often incur the
adaptation problem and yield poor performance. To address the above issues, we
propose a dual regression scheme by introducing an additional constraint on LR
data to reduce the space of the possible functions. Specifically, besides the
mapping from LR to HR images, we learn an additional dual regression mapping
estimates the down-sampling kernel and reconstruct LR images, which forms a
closed-loop to provide additional supervision. More critically, since the dual
regression process does not depend on HR images, we can directly learn from LR
images. In this sense, we can easily adapt SR models to real-world data, e.g.,
raw video frames from YouTube. Extensive experiments with paired training data
and unpaired real-world data demonstrate our superiority over existing methods.
- Abstract(参考訳): ディープニューラルネットワークは、低解像度(LR)画像から高解像度(HR)画像への非線形マッピング関数を学習することで、画像超解像(SR)において有望な性能を示した。
しかし、既存のSR法には2つの根本的な制限がある。
まず、LRからHR画像へのマッピング関数の学習は、同じLR画像にダウンサンプリングできる無限のHR画像が存在するため、一般的に不適切な問題である。
その結果、可能な関数の空間は非常に大きくなり、良い解を見つけるのが難しくなる。
第二に、LR-HRのペアデータは現実世界のアプリケーションでは利用できない場合がある。
このようなより一般的な場合、既存のSRモデルは適応問題を引き起こし、性能が劣る。
上記の問題に対処するために,可能関数の空間を削減するために,LRデータに新たな制約を導入することで,二重回帰方式を提案する。
具体的には、LRイメージからHRイメージへのマッピングに加えて、ダウンサンプリングカーネルを推定し、LRイメージを再構築し、クローズドループを形成し、さらなる監視を提供する。
さらに、二重回帰過程はHR画像に依存しないので、LR画像から直接学習することができる。
この意味で、SRモデルを実世界のデータ、例えばYouTubeの生のビデオフレームに簡単に適応させることができる。
ペアトレーニングデータと非ペアの現実世界データによる広範な実験は、既存の方法よりも優れていることを示している。
関連論文リスト
- Learning Many-to-Many Mapping for Unpaired Real-World Image
Super-resolution and Downscaling [60.80788144261183]
実世界のLR画像とHR画像の双方向多対多マッピングを教師なしで同時に学習するSDFlowと呼ばれる画像ダウンスケーリングとSRモデルを提案する。
実世界の画像SRデータセットによる実験結果から,SDFlowは定量的かつ定性的に,多様な現実的なLRとSRの画像を生成可能であることが示唆された。
論文 参考訳(メタデータ) (2023-10-08T01:48:34Z) - Real Image Super-Resolution using GAN through modeling of LR and HR
process [20.537597542144916]
LRモデルとSRモデルに組み込んだ学習可能な適応正弦波非線形性を提案し,分解分布を直接学習する。
定量的および定性的な実験において提案手法の有効性を実証する。
論文 参考訳(メタデータ) (2022-10-19T09:23:37Z) - Towards Lightweight Super-Resolution with Dual Regression Learning [58.98801753555746]
深層ニューラルネットワークは、画像超解像(SR)タスクにおいて顕著な性能を示した。
SR問題は通常不適切な問題であり、既存の手法にはいくつかの制限がある。
本稿では、SRマッピングの可能な空間を削減するために、二重回帰学習方式を提案する。
論文 参考訳(メタデータ) (2022-07-16T12:46:10Z) - LAPAR: Linearly-Assembled Pixel-Adaptive Regression Network for Single
Image Super-Resolution and Beyond [75.37541439447314]
単一画像超解像(SISR)は、低解像度(LR)画像を高解像度(HR)バージョンにアップサンプリングする根本的な問題を扱う。
本稿では,線形組立画素適応回帰ネットワーク (LAPAR) を提案する。
論文 参考訳(メタデータ) (2021-05-21T15:47:18Z) - Benefiting from Bicubically Down-Sampled Images for Learning Real-World
Image Super-Resolution [22.339751911637077]
我々は、この不適切な問題を2つの比較的よく提示されたステップに分割することで、現実世界のSRを扱うことを提案する。
まず、実LR画像を教師付きで双対的にダウンサンプリングされた画像の空間に変換するネットワークを訓練する。
次に,2次元ダウンサンプル画像に基づいて学習した汎用SRネットワークを用いて,変換されたLR画像の超解像を行う。
論文 参考訳(メタデータ) (2020-07-06T20:27:58Z) - Learning to Zoom-in via Learning to Zoom-out: Real-world
Super-resolution by Generating and Adapting Degradation [91.40265983636839]
本稿では,SR を任意の LR と HR 画像から学習するためのフレームワークを提案する。
我々は、劣化適応SRネットワークを学習しながら、生成されたデータと実データとの差を最小限にする。
提案手法は,ペア学習法をより好むデータセットであっても,実世界の画像上での最先端のSR結果を実現する。
論文 参考訳(メタデータ) (2020-01-08T05:17:02Z) - Characteristic Regularisation for Super-Resolving Face Images [81.84939112201377]
既存の顔画像超解像法(SR)は、主に人工的にダウンサンプリングされた低解像度(LR)画像の改善に焦点を当てている。
従来の非教師なしドメイン適応(UDA)手法は、未ペアの真のLRとHRデータを用いてモデルをトレーニングすることでこの問題に対処する。
これにより、視覚的特徴を構成することと、画像の解像度を高めることの2つのタスクで、モデルをオーバーストレッチする。
従来のSRモデルとUDAモデルの利点を結合する手法を定式化する。
論文 参考訳(メタデータ) (2019-12-30T16:27:24Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。