論文の概要: AdaDM: Enabling Normalization for Image Super-Resolution
- arxiv url: http://arxiv.org/abs/2111.13905v1
- Date: Sat, 27 Nov 2021 14:16:11 GMT
- ステータス: 処理完了
- システム内更新日: 2021-11-30 16:33:05.040586
- Title: AdaDM: Enabling Normalization for Image Super-Resolution
- Title(参考訳): AdaDM:画像超解像の正規化の実現
- Authors: Jie Liu, Jie Tang, Gangshan Wu
- Abstract要約: 忠実度画像超解法(SR)では,特徴を正規化することによって正規化層は範囲柔軟性を排除し,現代のSRネットワークから簡単に除去できると考えられる。
その結果, 残差の標準偏差は正規化層後に大きく減少し, SRネットワークの性能劣化の原因となることがわかった。
本稿では、変調係数を適応的に予測して画素偏差を増幅する適応偏差変調器(AdaDM)を提案する。
- 参考スコア(独自算出の注目度): 31.033444663076498
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Normalization like Batch Normalization (BN) is a milestone technique to
normalize the distributions of intermediate layers in deep learning, enabling
faster training and better generalization accuracy. However, in fidelity image
Super-Resolution (SR), it is believed that normalization layers get rid of
range flexibility by normalizing the features and they are simply removed from
modern SR networks. In this paper, we study this phenomenon quantitatively and
qualitatively. We found that the standard deviation of the residual feature
shrinks a lot after normalization layers, which causes the performance
degradation in SR networks. Standard deviation reflects the amount of variation
of pixel values. When the variation becomes smaller, the edges will become less
discriminative for the network to resolve. To address this problem, we propose
an Adaptive Deviation Modulator (AdaDM), in which a modulation factor is
adaptively predicted to amplify the pixel deviation. For better generalization
performance, we apply BN in state-of-the-art SR networks with the proposed
AdaDM. Meanwhile, the deviation amplification strategy in AdaDM makes the edge
information in the feature more distinguishable. As a consequence, SR networks
with BN and our AdaDM can get substantial performance improvements on benchmark
datasets. Extensive experiments have been conducted to show the effectiveness
of our method.
- Abstract(参考訳): バッチ正規化(bn)のような正規化は、ディープラーニングにおける中間層の分布を正規化し、より高速なトレーニングとより良い一般化精度を実現するためのマイルストーンテクニックである。
しかし、忠実度画像超解法(SR)では、正規化層は特徴を正規化することで範囲柔軟性を排除し、現代のSRネットワークから簡単に除去できると考えられている。
本稿では,この現象を定量的かつ質的に研究する。
その結果, 残差の標準偏差は正規化層後に大きく減少し, SRネットワークの性能劣化の原因となることがわかった。
標準偏差は画素値の変動の量を反映する。
変動が小さくなると、エッジはネットワークが解決する上での識別性が低下する。
この問題に対処するために,変調係数を適応的に予測して画素偏差を増幅する適応偏差変調器 (AdaDM) を提案する。
一般化性能の向上のために,提案したAdaDMを用いた最先端SRネットワークにBNを適用した。
一方、AdaDMにおける偏差増幅戦略は、特徴のエッジ情報をより区別しやすくする。
その結果、BNとAdaDMを備えたSRネットワークは、ベンチマークデータセットで大幅に性能が向上する。
本手法の有効性を示すため, 大規模な実験を行った。
関連論文リスト
- Latent Diffusion, Implicit Amplification: Efficient Continuous-Scale Super-Resolution for Remote Sensing Images [7.920423405957888]
E$2$DiffSRは、最先端のSR手法と比較して、客観的な指標と視覚的品質を達成する。
拡散に基づくSR法の推論時間を非拡散法と同程度のレベルに短縮する。
論文 参考訳(メタデータ) (2024-10-30T09:14:13Z) - Overcoming Distribution Mismatch in Quantizing Image Super-Resolution Networks [53.23803932357899]
量子化は画像超解像(SR)ネットワークの精度を低下させる。
既存の作業は、テスト時間中に量子化範囲を動的に適応することで、この分散ミスマッチ問題に対処する。
本稿では,SRネットワークにおける分散ミスマッチ問題を効果的に克服する量子化対応学習手法を提案する。
論文 参考訳(メタデータ) (2023-07-25T08:50:01Z) - Blind Super-Resolution for Remote Sensing Images via Conditional
Stochastic Normalizing Flows [14.882417028542855]
本稿では、上記の問題に対処するために、正規化フロー(BlindSRSNF)に基づく新しいブラインドSRフレームワークを提案する。
BlindSRSNFは、低解像度(LR)画像が与えられた高解像度画像空間上の条件確率分布を、確率の変動境界を明示的に最適化することによって学習する。
提案アルゴリズムは,シミュレーションLRと実世界RSIの両方において,視覚的品質の優れたSR結果が得られることを示す。
論文 参考訳(メタデータ) (2022-10-14T12:37:32Z) - Meta-Learning based Degradation Representation for Blind
Super-Resolution [54.93926549648434]
メタラーニングに基づく地域劣化対応SRネットワーク(MRDA)を提案する。
我々はMRDAを用いて、数回の反復後に特定の複雑な劣化に迅速に適応し、暗黙的な劣化情報を抽出する。
教師ネットワークMRDA$_T$は、SRのためにMLNが抽出した劣化情報をさらに活用するように設計されている。
論文 参考訳(メタデータ) (2022-07-28T09:03:00Z) - CADyQ: Content-Aware Dynamic Quantization for Image Super-Resolution [55.50793823060282]
本稿では,画像超解像(SR)ネットワークのための新しいコンテント・アウェア・ダイナミック量子化(CADyQ)手法を提案する。
CADyQは、入力画像のローカル内容に基づいて、局所領域と層に最適なビットを適応的に割り当てる。
パイプラインは様々なSRネットワークでテストされ、いくつかの標準ベンチマークで評価されている。
論文 参考訳(メタデータ) (2022-07-21T07:50:50Z) - Improving Super-Resolution Performance using Meta-Attention Layers [17.870338228921327]
畳み込みニューラルネットワーク(CNN)は多くの超解像(SR)と画像復元タスクで素晴らしい結果を得た。
SRのIll-posed性質は、複数の異なる劣化を経た画像を正確に超解き出すのを難しくする。
メタアテンション(メタアテンション)は、任意のSR CNNが関連する劣化パラメータで利用可能な情報を活用できるようにするメカニズムである。
論文 参考訳(メタデータ) (2021-10-27T09:20:21Z) - Style Normalization and Restitution for DomainGeneralization and
Adaptation [88.86865069583149]
効果的なドメイン一般化モデルは、一般化および判別可能な特徴表現を学習することが期待される。
本稿では,ネットワークの高一般化と識別能力を確保するために,新しいスタイル正規化・再構成モジュール(SNR)を設計する。
論文 参考訳(メタデータ) (2021-01-03T09:01:39Z) - SRFlow: Learning the Super-Resolution Space with Normalizing Flow [176.07982398988747]
超解像度は、与えられた低解像度画像の複数の予測を可能にするため、不適切な問題である。
出力の条件分布を学習できる正規化フローベース超解法SRFlowを提案する。
我々のモデルは、単一損失、すなわち負のログ類似度を用いて、原則的に訓練されている。
論文 参考訳(メタデータ) (2020-06-25T06:34:04Z) - Iterative Network for Image Super-Resolution [69.07361550998318]
単一画像超解像(SISR)は、最近の畳み込みニューラルネットワーク(CNN)の発展により、大幅に活性化されている。
本稿では、従来のSISRアルゴリズムに関する新たな知見を提供し、反復最適化に依存するアプローチを提案する。
反復最適化の上に,新しい反復型超解像ネットワーク (ISRN) を提案する。
論文 参考訳(メタデータ) (2020-05-20T11:11:47Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。