論文の概要: Unpaired Learning of Deep Image Denoising
- arxiv url: http://arxiv.org/abs/2008.13711v1
- Date: Mon, 31 Aug 2020 16:22:40 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-23 07:37:59.729561
- Title: Unpaired Learning of Deep Image Denoising
- Title(参考訳): 奥行き画像の非ペア学習
- Authors: Xiaohe Wu, Ming Liu, Yue Cao, Dongwei Ren, Wangmeng Zuo
- Abstract要約: 本稿では,自己指導型学習と知識蒸留を取り入れた2段階の手法を提案する。
自己教師型学習では,実雑音の画像のみから視覚を学習するための拡張型盲点ネットワーク(D-BSN)を提案する。
実験の結果,本手法は合成ノイズ画像と実世界のノイズ画像の両方で良好に機能することがわかった。
- 参考スコア(独自算出の注目度): 80.34135728841382
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We investigate the task of learning blind image denoising networks from an
unpaired set of clean and noisy images. Such problem setting generally is
practical and valuable considering that it is feasible to collect unpaired
noisy and clean images in most real-world applications. And we further assume
that the noise can be signal dependent but is spatially uncorrelated. In order
to facilitate unpaired learning of denoising network, this paper presents a
two-stage scheme by incorporating self-supervised learning and knowledge
distillation. For self-supervised learning, we suggest a dilated blind-spot
network (D-BSN) to learn denoising solely from real noisy images. Due to the
spatial independence of noise, we adopt a network by stacking 1x1 convolution
layers to estimate the noise level map for each image. Both the D-BSN and
image-specific noise model (CNN\_est) can be jointly trained via maximizing the
constrained log-likelihood. Given the output of D-BSN and estimated noise level
map, improved denoising performance can be further obtained based on the Bayes'
rule. As for knowledge distillation, we first apply the learned noise models to
clean images to synthesize a paired set of training images, and use the real
noisy images and the corresponding denoising results in the first stage to form
another paired set. Then, the ultimate denoising model can be distilled by
training an existing denoising network using these two paired sets. Experiments
show that our unpaired learning method performs favorably on both synthetic
noisy images and real-world noisy photographs in terms of quantitative and
qualitative evaluation.
- Abstract(参考訳): クリーンでノイズの多い画像群から視覚障害者のネットワークを学習する作業について検討する。
このような問題の設定は、実世界のほとんどのアプリケーションでノイズの多いクリーンな画像を集めることができるため、一般的に実用的で価値のあるものである。
さらに、ノイズは信号に依存するが空間的に相関しないと仮定する。
本稿では, 自己教師付き学習と知識蒸留を組み込んだ2段階方式を提案する。
自己教師付き学習では,実雑音の画像のみから視覚を学習するための拡張盲点ネットワーク(D-BSN)を提案する。
ノイズの空間的独立性のため、1x1畳み込み層を積み重ねて各画像の雑音レベルマップを推定するネットワークを採用する。
D-BSNと画像固有ノイズモデル(CNN\_est)は、制約されたログを最大化することで共同で訓練することができる。
D-BSNの出力と推定雑音レベルマップから,ベイズ法則に基づいてデノナイジング性能を向上させることができる。
知識蒸留については,まず,学習ノイズモデルをクリーン画像に適用してペアトレーニング画像の合成を行い,第1段階で実際のノイズ画像と対応する発声結果を用いて,新たなペアセットを形成する。
そして、これら2組の集合を用いて既存の復調ネットワークを訓練することにより、究極の復調モデルを蒸留することができる。
実験により, 実世界の雑音画像と合成ノイズ画像の両方において, 定量的, 定性的な評価で良好に学習できることが確認された。
関連論文リスト
- Self-Calibrated Variance-Stabilizing Transformations for Real-World Image Denoising [19.08732222562782]
教師付き深層学習が画像認知のための選択方法となっている。
一般の信条とは対照的に,ガウスノイズ除去に特化するネットワークを有効活用し,実世界の画像復調に有効であることを示す。
論文 参考訳(メタデータ) (2024-07-24T16:23:46Z) - Deep Variation Prior: Joint Image Denoising and Noise Variance
Estimation without Clean Data [2.3061446605472558]
本稿では,1つの共同学習フレームワークにおける画像復調と雑音分散推定の課題について検討する。
我々は、教師なしのディープラーニングフレームワークであるDVPを構築し、デノイザを同時に学習し、ノイズ分散を推定する。
提案手法では, クリーンなトレーニング画像やノイズ推定の外部ステップは必要とせず, ノイズ画像のみを用いて最小2乗誤差を近似する。
論文 参考訳(メタデータ) (2022-09-19T17:29:32Z) - Robust Deep Ensemble Method for Real-world Image Denoising [62.099271330458066]
そこで本研究では,実世界の画像認識のための単純なベイズディープアンサンブル(BDE)手法を提案する。
我々のBDEは、最先端の復調法よりも+0.28dBPSNRのゲインを達成している。
我々のBDEは他の画像復元タスクにも拡張でき、ベンチマークデータセット上で+0.30dB、+0.18dB、+0.12dB PSNRゲインを達成することができる。
論文 参考訳(メタデータ) (2022-06-08T06:19:30Z) - Learning to Generate Realistic Noisy Images via Pixel-level Noise-aware
Adversarial Training [50.018580462619425]
我々は,PNGAN(Pixel-level Noise-aware Generative Adrial Network)という新しいフレームワークを提案する。
PNGANは、トレーニング済みのリアルデノイザーを使用して、フェイク画像とリアルノイズ画像をほぼノイズのないソリューション空間にマッピングする。
より優れたノイズフィッティングを実現するため,ジェネレータとしてSimple Multi-versa-scale Network (SMNet) を提案する。
論文 参考訳(メタデータ) (2022-04-06T14:09:02Z) - IDR: Self-Supervised Image Denoising via Iterative Data Refinement [66.5510583957863]
本稿では,最先端のデノナイジング性能を実現するために,教師なしの実用的なデノナイジング手法を提案する。
本手法では, 1つのノイズ画像と1つのノイズモデルしか必要とせず, 実際の生画像に容易にアクセス可能である。
実世界のアプリケーションにおける生画像復調性能を評価するため,500シーンのシーンを含む高品質な生画像データセットSenseNoise-500を構築した。
論文 参考訳(メタデータ) (2021-11-29T07:22:53Z) - Neighbor2Neighbor: Self-Supervised Denoising from Single Noisy Images [98.82804259905478]
Neighbor2Neighborを提示し、ノイズの多い画像のみで効果的な画像消音モデルをトレーニングします。
ネットワークのトレーニングに使用される入力とターゲットは、同じノイズ画像からサブサンプリングされた画像である。
デノイジングネットワークは、第1段階で生成されたサブサンプルトレーニングペアで訓練され、提案された正規化器は、より良いパフォーマンスのための追加の損失として訓練される。
論文 参考訳(メタデータ) (2021-01-08T02:03:25Z) - Dual Adversarial Network: Toward Real-world Noise Removal and Noise
Generation [52.75909685172843]
実世界の画像ノイズ除去は、コンピュータビジョンにおける長年の課題である。
本稿では,ノイズ除去およびノイズ発生タスクに対処する新しい統合フレームワークを提案する。
本手法はクリーンノイズ画像対の連成分布を学習する。
論文 参考訳(メタデータ) (2020-07-12T09:16:06Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。