論文の概要: Multi-Stage Progressive Image Restoration
- arxiv url: http://arxiv.org/abs/2102.02808v1
- Date: Thu, 4 Feb 2021 18:57:07 GMT
- ステータス: 処理完了
- システム内更新日: 2021-02-05 16:23:03.958211
- Title: Multi-Stage Progressive Image Restoration
- Title(参考訳): 多段階プログレッシブ画像復元
- Authors: Syed Waqas Zamir, Aditya Arora, Salman Khan, Munawar Hayat, Fahad
Shahbaz Khan, Ming-Hsuan Yang, Ling Shao
- Abstract要約: 本稿では、これらの競合する目標を最適にバランスできる新しい相乗的設計を提案する。
本提案では, 劣化した入力の復元関数を段階的に学習する多段階アーキテクチャを提案する。
MPRNetという名前の密接な相互接続型マルチステージアーキテクチャは、10のデータセットに対して強力なパフォーマンス向上を実現している。
- 参考スコア(独自算出の注目度): 167.6852235432918
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: Image restoration tasks demand a complex balance between spatial details and
high-level contextualized information while recovering images. In this paper,
we propose a novel synergistic design that can optimally balance these
competing goals. Our main proposal is a multi-stage architecture, that
progressively learns restoration functions for the degraded inputs, thereby
breaking down the overall recovery process into more manageable steps.
Specifically, our model first learns the contextualized features using
encoder-decoder architectures and later combines them with a high-resolution
branch that retains local information. At each stage, we introduce a novel
per-pixel adaptive design that leverages in-situ supervised attention to
reweight the local features. A key ingredient in such a multi-stage
architecture is the information exchange between different stages. To this end,
we propose a two-faceted approach where the information is not only exchanged
sequentially from early to late stages, but lateral connections between feature
processing blocks also exist to avoid any loss of information. The resulting
tightly interlinked multi-stage architecture, named as MPRNet, delivers strong
performance gains on ten datasets across a range of tasks including image
deraining, deblurring, and denoising. For example, on the Rain100L, GoPro and
DND datasets, we obtain PSNR gains of 4 dB, 0.81 dB and 0.21 dB, respectively,
compared to the state-of-the-art. The source code and pre-trained models are
available at https://github.com/swz30/MPRNet.
- Abstract(参考訳): 画像復元タスクは、画像の復元中に空間的詳細と高レベル文脈情報との複雑なバランスを要求する。
本稿では,これらの目標を最適にバランスできる新しい相乗的設計を提案する。
我々の主な提案はマルチステージアーキテクチャであり、劣化した入力の復元機能を段階的に学習し、全体の回復プロセスをより管理しやすいステップに分解する。
具体的には、まずエンコーダ・デコーダアーキテクチャを用いてコンテキスト化された特徴を学習し、その後ローカル情報を保持する高分解能分岐と組み合わせる。
それぞれの段階において,局所的な特徴の重み付けに教師ありの注意を生かした,画素単位の適応設計を提案する。
このような多段階アーキテクチャの主要な要素は、異なる段階間の情報交換である。
そこで本研究では,情報を早期から後期にかけて順次交換するだけでなく,情報損失を回避するために特徴処理ブロック間の側方接続も有する二面的手法を提案する。
MPRNetと名づけられた密接な相互接続型マルチステージアーキテクチャは、イメージデレイン、デブレーション、デノイジングなど、さまざまなタスクで10のデータセットで強力なパフォーマンス向上を実現します。
例えば、Rain100L、GoPro、DNDデータセットでは、PSNRの利得はそれぞれ4 dB、0.81 dB、0.21 dBで、最先端のものと比較します。
ソースコードとトレーニング済みモデルはhttps://github.com/swz30/MPRNet.comで入手できる。
関連論文リスト
- Any Image Restoration with Efficient Automatic Degradation Adaptation [132.81912195537433]
本研究は, 各種劣化の相似性を有効かつ包括的修復に活用し, 共同埋設を実現する統一的な方法を提案する。
我々のネットワークは、モデルの複雑さをトレーニング可能なパラメータで約82%、FLOPで約85%削減しつつ、新しいSOTAレコードを設定している。
論文 参考訳(メタデータ) (2024-07-18T10:26:53Z) - Prompt-based Ingredient-Oriented All-in-One Image Restoration [0.0]
複数の画像劣化課題に対処する新しいデータ成分指向手法を提案する。
具体的には、エンコーダを用いて特徴をキャプチャし、デコーダを誘導するための劣化情報を含むプロンプトを導入する。
我々の手法は最先端技術と競争的に機能する。
論文 参考訳(メタデータ) (2023-09-06T15:05:04Z) - A Mountain-Shaped Single-Stage Network for Accurate Image Restoration [9.431709365739462]
画像復元においては、通常、空間的詳細と文脈情報の複雑なバランスを維持する必要がある。
不要な非線形活性化関数を除去または置換する,単純なU-Netアーキテクチャに基づく単一ステージ設計ベースを提案する。
我々のアプローチはM3SNetと呼ばれ、従来の最先端モデルよりも性能が優れており、計算コストの半分以下である。
論文 参考訳(メタデータ) (2023-05-09T03:18:35Z) - Mixed Hierarchy Network for Image Restoration [0.0]
画像復元における品質とシステムの複雑さのバランスをとることができる混合階層ネットワークを提案する。
我々のモデルはまずエンコーダ・デコーダアーキテクチャを用いて文脈情報を学習し,次に空間的詳細を保存する高分解能分岐と組み合わせる。
その結果、MHNetという名前の密接な相互接続階層アーキテクチャは、いくつかのイメージ復元タスクにおいて、強力なパフォーマンス向上をもたらす。
論文 参考訳(メタデータ) (2023-02-19T12:18:45Z) - Learning Detail-Structure Alternative Optimization for Blind
Super-Resolution [69.11604249813304]
そこで我々は,ブラインドSRに先立ってカーネルを曖昧にすることなく,再帰的な詳細構造代替最適化を実現する,有効かつカーネルフリーなネットワークDSSRを提案する。
DSSRでは、細部構造変調モジュール(DSMM)が構築され、画像の詳細と構造の相互作用と協調を利用する。
本手法は既存の手法に対して最先端の手法を実現する。
論文 参考訳(メタデータ) (2022-12-03T14:44:17Z) - Learning Enriched Features for Fast Image Restoration and Enhancement [166.17296369600774]
本稿では,ネットワーク全体を通して空間的精度の高い高解像度表現を維持することを目的とする。
我々は、高解像度の空間的詳細を同時に保存しながら、複数のスケールからの文脈情報を組み合わせた豊富な特徴集合を学習する。
提案手法は,デフォーカス・デブロアリング,画像デノイング,超解像,画像強調など,さまざまな画像処理タスクに対して,最先端の処理結果を実現する。
論文 参考訳(メタデータ) (2022-04-19T17:59:45Z) - Sequential Hierarchical Learning with Distribution Transformation for
Image Super-Resolution [83.70890515772456]
画像SRのための逐次階層学習型超解像ネットワーク(SHSR)を構築した。
特徴のスケール間相関を考察し、階層的情報を段階的に探索するシーケンシャルなマルチスケールブロック(SMB)を考案する。
実験結果から,SHSRは最先端手法に優れた定量的性能と視覚的品質が得られることが示された。
論文 参考訳(メタデータ) (2020-07-19T01:35:53Z) - Learning Enriched Features for Real Image Restoration and Enhancement [166.17296369600774]
畳み込みニューラルネットワーク(CNN)は、画像復元作業における従来のアプローチよりも劇的に改善されている。
ネットワーク全体を通して空間的精度の高い高解像度表現を維持することを目的とした,新しいアーキテクチャを提案する。
提案手法は,高解像度の空間的詳細を同時に保存しながら,複数のスケールからの文脈情報を組み合わせた豊富な特徴集合を学習する。
論文 参考訳(メタデータ) (2020-03-15T11:04:30Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。