論文の概要: Noise2NoiseFlow: Realistic Camera Noise Modeling without Clean Images
- arxiv url: http://arxiv.org/abs/2206.01103v1
- Date: Thu, 2 Jun 2022 15:31:40 GMT
- ステータス: 処理完了
- システム内更新日: 2022-06-03 14:57:21.415822
- Title: Noise2NoiseFlow: Realistic Camera Noise Modeling without Clean Images
- Title(参考訳): noise2noiseflow:クリーンな画像のない現実的なカメラノイズモデリング
- Authors: Ali Maleky, Shayan Kousha, Michael S. Brown, Marcus A. Brubaker
- Abstract要約: 本稿では,ノイズモデルとデノイザを同時にトレーニングするためのフレームワークを提案する。
ノイズ/クリーンなペア画像データではなく、ノイズの多いイメージのペアに依存します。
トレーニングされたデノイザーは、教師付きおよび弱教師付きベースラインデノイジングアプローチの両方において、大幅に改善される。
- 参考スコア(独自算出の注目度): 35.29066692454865
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Image noise modeling is a long-standing problem with many applications in
computer vision. Early attempts that propose simple models, such as
signal-independent additive white Gaussian noise or the heteroscedastic
Gaussian noise model (a.k.a., camera noise level function) are not sufficient
to learn the complex behavior of the camera sensor noise. Recently, more
complex learning-based models have been proposed that yield better results in
noise synthesis and downstream tasks, such as denoising. However, their
dependence on supervised data (i.e., paired clean images) is a limiting factor
given the challenges in producing ground-truth images. This paper proposes a
framework for training a noise model and a denoiser simultaneously while
relying only on pairs of noisy images rather than noisy/clean paired image
data. We apply this framework to the training of the Noise Flow architecture.
The noise synthesis and density estimation results show that our framework
outperforms previous signal-processing-based noise models and is on par with
its supervised counterpart. The trained denoiser is also shown to significantly
improve upon both supervised and weakly supervised baseline denoising
approaches. The results indicate that the joint training of a denoiser and a
noise model yields significant improvements in the denoiser.
- Abstract(参考訳): 画像ノイズモデリングはコンピュータビジョンにおける多くの応用において長年の課題である。
信号独立な付加的な白色ガウスノイズやヘテロセダスティックガウスノイズモデル(カメラノイズレベル関数)といった単純なモデルを提案する初期の試みは、カメラセンサノイズの複雑な振る舞いを学習するには不十分である。
近年、より複雑な学習ベースモデルが提案され、ノイズ合成や雑音発生などの下流タスクにより良い結果をもたらす。
しかし、それらの教師付きデータ(すなわちペアのクリーン画像)への依存は、地上画像を生成する際の課題を考えると、限界要因である。
本稿では,ノイズ/クリーンなペア画像データではなく,ノイズのペア画像にのみ依存しながら,ノイズモデルと雑音を同時に訓練するためのフレームワークを提案する。
この枠組みをノイズフローアーキテクチャのトレーニングに適用する。
ノイズ合成と密度推定の結果,我々のフレームワークは従来の信号処理に基づくノイズモデルよりも優れており,教師付きノイズモデルと同等であることがわかった。
トレーニングされたデノイザーは、教師付きおよび弱教師付きベースラインデノイジングアプローチの両方で大幅に改善される。
その結果, 騒音モデルと除音器の連成訓練により, 除音器の大幅な改善が得られた。
関連論文リスト
- NoiseTransfer: Image Noise Generation with Contrastive Embeddings [9.322843611215486]
本稿では,複数のノイズ分布を持つ雑音像を合成できる新しい生成モデルを提案する。
我々は、雑音の識別可能な潜在特徴を学習するために、最近のコントラスト学習を採用する。
本モデルでは,単一の基準雑音画像からのみノイズ特性を伝達することにより,新しい雑音画像を生成することができる。
論文 参考訳(メタデータ) (2023-01-31T11:09:15Z) - Deep Variation Prior: Joint Image Denoising and Noise Variance
Estimation without Clean Data [2.3061446605472558]
本稿では,1つの共同学習フレームワークにおける画像復調と雑音分散推定の課題について検討する。
我々は、教師なしのディープラーニングフレームワークであるDVPを構築し、デノイザを同時に学習し、ノイズ分散を推定する。
提案手法では, クリーンなトレーニング画像やノイズ推定の外部ステップは必要とせず, ノイズ画像のみを用いて最小2乗誤差を近似する。
論文 参考訳(メタデータ) (2022-09-19T17:29:32Z) - Learning to Generate Realistic Noisy Images via Pixel-level Noise-aware
Adversarial Training [50.018580462619425]
我々は,PNGAN(Pixel-level Noise-aware Generative Adrial Network)という新しいフレームワークを提案する。
PNGANは、トレーニング済みのリアルデノイザーを使用して、フェイク画像とリアルノイズ画像をほぼノイズのないソリューション空間にマッピングする。
より優れたノイズフィッティングを実現するため,ジェネレータとしてSimple Multi-versa-scale Network (SMNet) を提案する。
論文 参考訳(メタデータ) (2022-04-06T14:09:02Z) - Estimating Fine-Grained Noise Model via Contrastive Learning [11.626812663592416]
本稿では,現実的な雑音画像生成のための革新的なノイズモデル推定とノイズ合成パイプラインを提案する。
本モデルでは, 微粒な統計的雑音モデルを用いた雑音推定モデルについて, 対照的に学習する。
いくつかのセンサのノイズモデルを校正することで、我々のモデルは他のカメラを予測できるように拡張することができる。
論文 参考訳(メタデータ) (2022-04-03T02:35:01Z) - IDR: Self-Supervised Image Denoising via Iterative Data Refinement [66.5510583957863]
本稿では,最先端のデノナイジング性能を実現するために,教師なしの実用的なデノナイジング手法を提案する。
本手法では, 1つのノイズ画像と1つのノイズモデルしか必要とせず, 実際の生画像に容易にアクセス可能である。
実世界のアプリケーションにおける生画像復調性能を評価するため,500シーンのシーンを含む高品質な生画像データセットSenseNoise-500を構築した。
論文 参考訳(メタデータ) (2021-11-29T07:22:53Z) - Rethinking Noise Synthesis and Modeling in Raw Denoising [75.55136662685341]
センサの実際の雑音を直接サンプリングすることで、ノイズを合成する新しい視点を導入する。
それは本質的に、異なるカメラセンサーに対して正確な生画像ノイズを発生させる。
論文 参考訳(メタデータ) (2021-10-10T10:45:24Z) - Physics-based Noise Modeling for Extreme Low-light Photography [63.65570751728917]
CMOS光センサの撮像パイプラインにおけるノイズ統計について検討する。
実雑音構造を正確に特徴付けることのできる包括的ノイズモデルを定式化する。
我々のノイズモデルは、学習に基づく低照度復調アルゴリズムのためのリアルなトレーニングデータを合成するのに利用できる。
論文 参考訳(メタデータ) (2021-08-04T16:36:29Z) - Neighbor2Neighbor: Self-Supervised Denoising from Single Noisy Images [98.82804259905478]
Neighbor2Neighborを提示し、ノイズの多い画像のみで効果的な画像消音モデルをトレーニングします。
ネットワークのトレーニングに使用される入力とターゲットは、同じノイズ画像からサブサンプリングされた画像である。
デノイジングネットワークは、第1段階で生成されたサブサンプルトレーニングペアで訓練され、提案された正規化器は、より良いパフォーマンスのための追加の損失として訓練される。
論文 参考訳(メタデータ) (2021-01-08T02:03:25Z) - Adaptive noise imitation for image denoising [58.21456707617451]
本研究では,自然雑音画像からノイズデータを合成できる新しいテキストバッファ適応ノイズ模倣(ADANI)アルゴリズムを開発した。
現実的なノイズを生成するため、ノイズ発生装置はノイズ発生のガイドとなる雑音/クリーン画像を入力として利用する。
ADANIから出力されるノイズデータとそれに対応する基盤構造とを結合すると、デノイングCNNは、完全に教師された方法で訓練される。
論文 参考訳(メタデータ) (2020-11-30T02:49:36Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。