論文の概要: Learning to Generate Realistic Noisy Images via Pixel-level Noise-aware
Adversarial Training
- arxiv url: http://arxiv.org/abs/2204.02844v1
- Date: Wed, 6 Apr 2022 14:09:02 GMT
- ステータス: 処理完了
- システム内更新日: 2022-04-07 14:49:51.793158
- Title: Learning to Generate Realistic Noisy Images via Pixel-level Noise-aware
Adversarial Training
- Title(参考訳): 画素レベルの雑音認識による現実的な雑音画像生成学習
- Authors: Yuanhao Cai, Xiaowan Hu, Haoqian Wang, Yulun Zhang, Hanspeter Pfister,
Donglai Wei
- Abstract要約: 我々は,PNGAN(Pixel-level Noise-aware Generative Adrial Network)という新しいフレームワークを提案する。
PNGANは、トレーニング済みのリアルデノイザーを使用して、フェイク画像とリアルノイズ画像をほぼノイズのないソリューション空間にマッピングする。
より優れたノイズフィッティングを実現するため,ジェネレータとしてSimple Multi-versa-scale Network (SMNet) を提案する。
- 参考スコア(独自算出の注目度): 50.018580462619425
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Existing deep learning real denoising methods require a large amount of
noisy-clean image pairs for supervision. Nonetheless, capturing a real
noisy-clean dataset is an unacceptable expensive and cumbersome procedure. To
alleviate this problem, this work investigates how to generate realistic noisy
images. Firstly, we formulate a simple yet reasonable noise model that treats
each real noisy pixel as a random variable. This model splits the noisy image
generation problem into two sub-problems: image domain alignment and noise
domain alignment. Subsequently, we propose a novel framework, namely
Pixel-level Noise-aware Generative Adversarial Network (PNGAN). PNGAN employs a
pre-trained real denoiser to map the fake and real noisy images into a nearly
noise-free solution space to perform image domain alignment. Simultaneously,
PNGAN establishes a pixel-level adversarial training to conduct noise domain
alignment. Additionally, for better noise fitting, we present an efficient
architecture Simple Multi-scale Network (SMNet) as the generator. Qualitative
validation shows that noise generated by PNGAN is highly similar to real noise
in terms of intensity and distribution. Quantitative experiments demonstrate
that a series of denoisers trained with the generated noisy images achieve
state-of-the-art (SOTA) results on four real denoising benchmarks.
- Abstract(参考訳): 既存のディープラーニングの実演法では、監視のために大量のノイズとクリーンなイメージペアが必要である。
それでも、真にノイズの多いクリーンなデータセットをキャプチャすることは、受け入れられないコストと面倒な手続きである。
この問題を軽減するため,本研究では,現実的なノイズ画像の生成方法について検討する。
まず、各実雑音画素をランダムな変数として扱う、単純で合理的なノイズモデルを定式化する。
このモデルはノイズ画像生成問題を画像領域アライメントとノイズ領域アライメントの2つのサブ問題に分割する。
次に,PNGAN(Pixel-level Noise-aware Generative Adversarial Network)という新しいフレームワークを提案する。
pnganはトレーニング済みのreal denoiserを使用して、偽および実際のノイズの多い画像をほぼノイズのないソリューション空間にマッピングし、画像領域アライメントを実行する。
同時に、PNGANはノイズ領域アライメントを行うための画素レベルの対向訓練を確立する。
さらに、ノイズフィッティングを改善するために、ジェネレータとしてSimple Multi-scale Network (SMNet) を提案する。
定性的検証は、PNGANが生成するノイズが強度と分布の点で実雑音と非常によく似ていることを示している。
定量的実験により、生成したノイズ画像で訓練された一連のデノイザーが、4つの実デノイジングベンチマークで最先端(SOTA)の結果が得られることが示された。
関連論文リスト
- Noise2NoiseFlow: Realistic Camera Noise Modeling without Clean Images [35.29066692454865]
本稿では,ノイズモデルとデノイザを同時にトレーニングするためのフレームワークを提案する。
ノイズ/クリーンなペア画像データではなく、ノイズの多いイメージのペアに依存します。
トレーニングされたデノイザーは、教師付きおよび弱教師付きベースラインデノイジングアプローチの両方において、大幅に改善される。
論文 参考訳(メタデータ) (2022-06-02T15:31:40Z) - C2N: Practical Generative Noise Modeling for Real-World Denoising [53.96391787869974]
両例を使わずに複雑な実世界の騒音を模倣するクリーン・ツー・ノイズ画像生成フレームワーク,すなわちC2Nを導入する。
我々は,C2Nの騒音発生器を実世界の騒音特性の成分に応じて構築し,広い範囲の騒音を正確に表現する。
論文 参考訳(メタデータ) (2022-02-19T05:53:46Z) - IDR: Self-Supervised Image Denoising via Iterative Data Refinement [66.5510583957863]
本稿では,最先端のデノナイジング性能を実現するために,教師なしの実用的なデノナイジング手法を提案する。
本手法では, 1つのノイズ画像と1つのノイズモデルしか必要とせず, 実際の生画像に容易にアクセス可能である。
実世界のアプリケーションにおける生画像復調性能を評価するため,500シーンのシーンを含む高品質な生画像データセットSenseNoise-500を構築した。
論文 参考訳(メタデータ) (2021-11-29T07:22:53Z) - Neighbor2Neighbor: Self-Supervised Denoising from Single Noisy Images [98.82804259905478]
Neighbor2Neighborを提示し、ノイズの多い画像のみで効果的な画像消音モデルをトレーニングします。
ネットワークのトレーニングに使用される入力とターゲットは、同じノイズ画像からサブサンプリングされた画像である。
デノイジングネットワークは、第1段階で生成されたサブサンプルトレーニングペアで訓練され、提案された正規化器は、より良いパフォーマンスのための追加の損失として訓練される。
論文 参考訳(メタデータ) (2021-01-08T02:03:25Z) - Unpaired Learning of Deep Image Denoising [80.34135728841382]
本稿では,自己指導型学習と知識蒸留を取り入れた2段階の手法を提案する。
自己教師型学習では,実雑音の画像のみから視覚を学習するための拡張型盲点ネットワーク(D-BSN)を提案する。
実験の結果,本手法は合成ノイズ画像と実世界のノイズ画像の両方で良好に機能することがわかった。
論文 参考訳(メタデータ) (2020-08-31T16:22:40Z) - Dual Adversarial Network: Toward Real-world Noise Removal and Noise
Generation [52.75909685172843]
実世界の画像ノイズ除去は、コンピュータビジョンにおける長年の課題である。
本稿では,ノイズ除去およびノイズ発生タスクに対処する新しい統合フレームワークを提案する。
本手法はクリーンノイズ画像対の連成分布を学習する。
論文 参考訳(メタデータ) (2020-07-12T09:16:06Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。