論文の概要: Adaptive Denoising via GainTuning
- arxiv url: http://arxiv.org/abs/2107.12815v1
- Date: Tue, 27 Jul 2021 13:35:48 GMT
- ステータス: 処理完了
- システム内更新日: 2021-07-28 14:38:55.857825
- Title: Adaptive Denoising via GainTuning
- Title(参考訳): GainTuningによる適応型Denoising
- Authors: Sreyas Mohan, Joshua L. Vincent, Ramon Manzorro, Peter A. Crozier,
Eero P. Simoncelli, Carlos Fernandez-Granda
- Abstract要約: 画像復調のためのディープ畳み込みニューラルネットワーク(CNN)は通常、大規模なデータセットでトレーニングされる。
本稿では,大規模データセット上で事前学習したCNNモデルを,個々のテスト画像に対して適応的かつ選択的に調整する「GainTuning」を提案する。
GainTuningは、標準的な画像デノゲティングベンチマークで最先端のCNNを改善し、ホールドアウトテストセットのほぼすべての画像上でのデノゲティング性能を向上させる。
- 参考スコア(独自算出の注目度): 17.72738152112575
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Deep convolutional neural networks (CNNs) for image denoising are usually
trained on large datasets. These models achieve the current state of the art,
but they have difficulties generalizing when applied to data that deviate from
the training distribution. Recent work has shown that it is possible to train
denoisers on a single noisy image. These models adapt to the features of the
test image, but their performance is limited by the small amount of information
used to train them. Here we propose "GainTuning", in which CNN models
pre-trained on large datasets are adaptively and selectively adjusted for
individual test images. To avoid overfitting, GainTuning optimizes a single
multiplicative scaling parameter (the "Gain") of each channel in the
convolutional layers of the CNN. We show that GainTuning improves
state-of-the-art CNNs on standard image-denoising benchmarks, boosting their
denoising performance on nearly every image in a held-out test set. These
adaptive improvements are even more substantial for test images differing
systematically from the training data, either in noise level or image type. We
illustrate the potential of adaptive denoising in a scientific application, in
which a CNN is trained on synthetic data, and tested on real
transmission-electron-microscope images. In contrast to the existing
methodology, GainTuning is able to faithfully reconstruct the structure of
catalytic nanoparticles from these data at extremely low signal-to-noise
ratios.
- Abstract(参考訳): 画像デノイジングのための深層畳み込みニューラルネットワーク(cnns)は通常、大規模なデータセットでトレーニングされる。
これらのモデルは現在の技術状況を達成するが、トレーニング分布から逸脱したデータに適用しても一般化が難しい。
近年の研究では、1つのノイズ画像でデノイザを訓練することが可能であることが示されている。
これらのモデルはテスト画像の特徴に適応するが、その性能は訓練に使用する情報の量によって制限される。
本稿では,大規模データセット上で事前学習したCNNモデルを,個々のテスト画像に対して適応的かつ選択的に調整するGainTuningを提案する。
オーバーフィッティングを避けるために、gaintuningはcnnの畳み込み層における各チャネルの単一の乗法的スケーリングパラメータ("gain")を最適化する。
GainTuningは、標準的な画像デノゲティングベンチマークで最先端のCNNを改善し、ホールドアウトテストセットのほぼすべての画像上でのデノゲティング性能を向上させる。
これらの適応的な改善は、トレーニングデータと、ノイズレベルまたはイメージタイプにおいて、体系的に異なるテストイメージに対してさらに重要なものである。
本研究では,cnnを合成データで訓練し,実際の透過型電子マイクロスコープ画像でテストする科学応用において,適応的雑音化の可能性を示す。
既存の手法とは対照的に、GainTuningは極低信号-雑音比でこれらのデータから触媒ナノ粒子の構造を忠実に再構築することができる。
関連論文リスト
- Learning with Noisy Foundation Models [95.50968225050012]
本論文は、事前学習データセットにおけるノイズの性質を包括的に理解し分析する最初の研究である。
雑音の悪影響を緩和し、一般化を改善するため、特徴空間に適応するチューニング法(NMTune)を提案する。
論文 参考訳(メタデータ) (2024-03-11T16:22:41Z) - Decoupled Mixup for Generalized Visual Recognition [71.13734761715472]
視覚認識のためのCNNモデルを学習するための新しい「デカップリング・ミクスアップ」手法を提案する。
本手法は,各画像を識別領域と雑音発生領域に分離し,これらの領域を均一に組み合わせてCNNモデルを訓練する。
実験結果から,未知のコンテキストからなるデータに対する本手法の高一般化性能を示す。
論文 参考訳(メタデータ) (2022-10-26T15:21:39Z) - Enhancing convolutional neural network generalizability via low-rank weight approximation [6.763245393373041]
十分なノイズ処理は、画像処理にとって重要な第一歩であることが多い。
ディープニューラルネットワーク(DNN)は画像のノイズ化に広く利用されている。
本研究では,タッカー低ランクテンソル近似に基づく自己教師付き画像復調フレームワークを提案する。
論文 参考訳(メタデータ) (2022-09-26T14:11:05Z) - Multi-stage image denoising with the wavelet transform [125.2251438120701]
深部畳み込みニューラルネットワーク(Deep Convolutional Neural Network, CNN)は、正確な構造情報を自動マイニングすることで、画像の復調に使用される。
動的畳み込みブロック(DCB)、2つのカスケードウェーブレット変換および拡張ブロック(WEB)、残留ブロック(RB)の3段階を経由した、MWDCNNによるCNNの多段階化を提案する。
論文 参考訳(メタデータ) (2022-09-26T03:28:23Z) - Robust Deep Ensemble Method for Real-world Image Denoising [62.099271330458066]
そこで本研究では,実世界の画像認識のための単純なベイズディープアンサンブル(BDE)手法を提案する。
我々のBDEは、最先端の復調法よりも+0.28dBPSNRのゲインを達成している。
我々のBDEは他の画像復元タスクにも拡張でき、ベンチマークデータセット上で+0.30dB、+0.18dB、+0.12dB PSNRゲインを達成することができる。
論文 参考訳(メタデータ) (2022-06-08T06:19:30Z) - Image Denoising using Attention-Residual Convolutional Neural Networks [0.0]
本稿では,学習に基づく新たな非盲検手法であるAttention Residual Convolutional Neural Network (ARCNN)を提案し,その拡張としてFlexible Attention Residual Convolutional Neural Network (FARCNN)を提案する。
ARCNNはガウス語とポアソン語で約0.44dBと0.96dBの平均PSNR結果を達成し、FARCNNはARCNNに比べて若干パフォーマンスが悪くても非常に一貫した結果を示した。
論文 参考訳(メタデータ) (2021-01-19T16:37:57Z) - Unrolling of Deep Graph Total Variation for Image Denoising [106.93258903150702]
本稿では,従来のグラフ信号フィルタリングと深い特徴学習を併用して,競合するハイブリッド設計を提案する。
解釈可能な低パスグラフフィルタを用い、最先端のDL復調方式DnCNNよりも80%少ないネットワークパラメータを用いる。
論文 参考訳(メタデータ) (2020-10-21T20:04:22Z) - Enhancement of a CNN-Based Denoiser Based on Spatial and Spectral
Analysis [23.11994688706024]
本稿では,複数のノイズで劣化した画像を1つのモデルで復元する離散ウェーブレットデノイズCNN(WDnCNN)を提案する。
この問題に対処するために、周波数スペクトルの異なる部分から係数を正規化するバンド正規化モジュール(BNM)を提案する。
提案したWDnCNNを評価し,他の最先端のデノイザと比較した。
論文 参考訳(メタデータ) (2020-06-28T05:25:50Z) - CycleISP: Real Image Restoration via Improved Data Synthesis [166.17296369600774]
本稿では,前向きと逆方向のカメラ画像パイプラインをモデル化するフレームワークを提案する。
リアルな合成データに基づいて新しい画像認識ネットワークをトレーニングすることにより、実際のカメラベンチマークデータセット上で最先端のパフォーマンスを実現する。
論文 参考訳(メタデータ) (2020-03-17T15:20:25Z) - Noise2Inverse: Self-supervised deep convolutional denoising for
tomography [0.0]
Noise2Inverseは、線形画像再構成アルゴリズムのためのディープCNNに基づくDenoising法である。
そこで我々は,そのような学習がCNNを実際に獲得することを示す理論的枠組みを構築した。
シミュレーションCTデータセットにおいて、Noss2Inverseはピーク信号対雑音比と構造類似度指数の改善を示す。
論文 参考訳(メタデータ) (2020-01-31T12:50:24Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。