論文の概要: Gated Fusion Network for Degraded Image Super Resolution
- arxiv url: http://arxiv.org/abs/2003.00893v2
- Date: Wed, 4 Mar 2020 10:47:16 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-27 05:22:48.026279
- Title: Gated Fusion Network for Degraded Image Super Resolution
- Title(参考訳): 劣化画像超解像のためのGated Fusion Network
- Authors: Xinyi Zhang, Hang Dong, Zhe Hu, Wei-Sheng Lai, Fei Wang, Ming-Hsuan
Yang
- Abstract要約: 本稿では,基本特徴と回復特徴を別々に抽出する二分岐畳み込みニューラルネットワークを提案する。
特徴抽出ステップを2つのタスク非依存ストリームに分解することで、デュアルブランチモデルがトレーニングプロセスを容易にすることができる。
- 参考スコア(独自算出の注目度): 78.67168802945069
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Single image super resolution aims to enhance image quality with respect to
spatial content, which is a fundamental task in computer vision. In this work,
we address the task of single frame super resolution with the presence of image
degradation, e.g., blur, haze, or rain streaks. Due to the limitations of frame
capturing and formation processes, image degradation is inevitable, and the
artifacts would be exacerbated by super resolution methods. To address this
problem, we propose a dual-branch convolutional neural network to extract base
features and recovered features separately. The base features contain local and
global information of the input image. On the other hand, the recovered
features focus on the degraded regions and are used to remove the degradation.
Those features are then fused through a recursive gate module to obtain sharp
features for super resolution. By decomposing the feature extraction step into
two task-independent streams, the dual-branch model can facilitate the training
process by avoiding learning the mixed degradation all-in-one and thus enhance
the final high-resolution prediction results. We evaluate the proposed method
in three degradation scenarios. Experiments on these scenarios demonstrate that
the proposed method performs more efficiently and favorably against the
state-of-the-art approaches on benchmark datasets.
- Abstract(参考訳): 単一画像スーパーレゾリューションは,コンピュータビジョンの基本課題である空間的コンテンツに対する画質の向上を目的としている。
本研究では,単一フレーム超解像度の課題であるぼやけ,ぼやけ,雨のストレークなど画像劣化の存在について述べる。
フレームキャプチャとフォーメーションプロセスの制限のため、画像の劣化は避けられず、人工物はスーパーレゾリューション法によって悪化する。
この問題に対処するために,基本特徴と回復特徴を分離して抽出する二分岐畳み込みニューラルネットワークを提案する。
ベース機能は、入力画像のローカルおよびグローバル情報を含む。
一方,回復した特徴は劣化領域に着目し,劣化の除去に用いられる。
これらの機能は再帰ゲートモジュールを通して融合され、超高解像度のシャープな特徴を得る。
特徴抽出ステップを2つのタスク非依存ストリームに分解することにより、混合劣化オールインワンの学習を回避し、最終的な高分解能予測結果を高めることにより、デュアルブランチモデルはトレーニングプロセスを容易化することができる。
提案手法を3つの劣化シナリオで評価した。
これらのシナリオの実験により,提案手法は,ベンチマークデータセットの最先端アプローチに対して,より効率的かつ好適に機能することを示した。
関連論文リスト
- Diff-Restorer: Unleashing Visual Prompts for Diffusion-based Universal Image Restoration [19.87693298262894]
拡散モデルに基づく普遍的な画像復元手法であるDiff-Restorerを提案する。
我々は、事前学習された視覚言語モデルを用いて、劣化した画像から視覚的プロンプトを抽出する。
また、デグレーション対応デコーダを設計し、構造的補正を行い、潜在コードをピクセル領域に変換する。
論文 参考訳(メタデータ) (2024-07-04T05:01:10Z) - Gated Multi-Resolution Transfer Network for Burst Restoration and
Enhancement [75.25451566988565]
低画質の原画像のバーストから空間的精度の高い高画質画像を再構成する新しいGated Multi-Resolution Transfer Network (GMTNet)を提案する。
5つのデータセットに関する詳細な実験分析は、我々のアプローチを検証し、バースト超解像、バーストデノイング、低照度バーストエンハンスメントのための最先端技術を設定する。
論文 参考訳(メタデータ) (2023-04-13T17:54:00Z) - Multi-Modal and Multi-Resolution Data Fusion for High-Resolution Cloud Removal: A Novel Baseline and Benchmark [21.255966041023083]
マルチモーダルおよびマルチリゾリューションデータ融合を用いた高分解能クラウド除去のためのベンチマークデータセットであるM3R-CRを紹介する。
マルチモーダル・マルチレゾリューション情報の統合による高解像度光リモートセンシング画像における雲除去の問題点を考察する。
我々は、低解像度SAR画像誘導高解像度光画像雲除去を行うためのAlign-CRという新しいベースラインを設計する。
論文 参考訳(メタデータ) (2023-01-09T15:31:28Z) - Invertible Rescaling Network and Its Extensions [118.72015270085535]
本研究では,新たな視点から双方向の劣化と復元をモデル化する,新しい可逆的枠組みを提案する。
我々は、有効な劣化画像を生成し、失われたコンテンツの分布を変換する可逆モデルを開発する。
そして、ランダムに描画された潜在変数とともに、生成された劣化画像に逆変換を適用することにより、復元可能とする。
論文 参考訳(メタデータ) (2022-10-09T06:58:58Z) - Hierarchical Similarity Learning for Aliasing Suppression Image
Super-Resolution [64.15915577164894]
エイリアスの影響を抑制するために階層画像超解像ネットワーク(HSRNet)を提案する。
HSRNetは、他の作品よりも定量的かつ視覚的なパフォーマンスを向上し、エイリアスをより効果的に再送信する。
論文 参考訳(メタデータ) (2022-06-07T14:55:32Z) - Dual Perceptual Loss for Single Image Super-Resolution Using ESRGAN [13.335546116599494]
本稿では,従来の知覚損失を置き換えるためにDP損失(Dual Perceptual Loss)と呼ばれる手法を提案する。
VGG特徴とResNet特徴の相補的な性質のため、提案されたDPロスは2つの特徴を同時に学習する利点を考察する。
ベンチマークデータセットの定性的および定量的解析により,提案手法が最先端の超解像法よりも優れていることを示す。
論文 参考訳(メタデータ) (2022-01-17T12:42:56Z) - Spatially-Adaptive Image Restoration using Distortion-Guided Networks [51.89245800461537]
空間的に変化する劣化に苦しむ画像の復元のための学習ベースソリューションを提案する。
本研究では、歪み局所化情報を活用し、画像中の困難な領域に動的に適応するネットワーク設計であるSPAIRを提案する。
論文 参考訳(メタデータ) (2021-08-19T11:02:25Z) - Invertible Image Rescaling [118.2653765756915]
Invertible Rescaling Net (IRN) を開発した。
我々は、ダウンスケーリングプロセスにおいて、指定された分布に従う潜在変数を用いて、失われた情報の分布をキャプチャする。
論文 参考訳(メタデータ) (2020-05-12T09:55:53Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。