論文の概要: NoiseTransfer: Image Noise Generation with Contrastive Embeddings
- arxiv url: http://arxiv.org/abs/2301.13554v1
- Date: Tue, 31 Jan 2023 11:09:15 GMT
- ステータス: 処理完了
- システム内更新日: 2023-02-01 16:46:47.247779
- Title: NoiseTransfer: Image Noise Generation with Contrastive Embeddings
- Title(参考訳): ノイズ伝達:コントラスト埋め込みによる画像ノイズ生成
- Authors: Seunghwan Lee and Tae Hyun Kim
- Abstract要約: 本稿では,複数のノイズ分布を持つ雑音像を合成できる新しい生成モデルを提案する。
我々は、雑音の識別可能な潜在特徴を学習するために、最近のコントラスト学習を採用する。
本モデルでは,単一の基準雑音画像からのみノイズ特性を伝達することにより,新しい雑音画像を生成することができる。
- 参考スコア(独自算出の注目度): 9.322843611215486
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Deep image denoising networks have achieved impressive success with the help
of a considerably large number of synthetic train datasets. However, real-world
denoising is a still challenging problem due to the dissimilarity between
distributions of real and synthetic noisy datasets. Although several real-world
noisy datasets have been presented, the number of train datasets (i.e., pairs
of clean and real noisy images) is limited, and acquiring more real noise
datasets is laborious and expensive. To mitigate this problem, numerous
attempts to simulate real noise models using generative models have been
studied. Nevertheless, previous works had to train multiple networks to handle
multiple different noise distributions. By contrast, we propose a new
generative model that can synthesize noisy images with multiple different noise
distributions. Specifically, we adopt recent contrastive learning to learn
distinguishable latent features of the noise. Moreover, our model can generate
new noisy images by transferring the noise characteristics solely from a single
reference noisy image. We demonstrate the accuracy and the effectiveness of our
noise model for both known and unknown noise removal.
- Abstract(参考訳): 深層画像デノージングネットワークは、膨大な数の合成列車データセットの助けを借りて、素晴らしい成功を収めている。
しかし,実世界のデノイジングは,実データと合成雑音データとの分布が異なっており,まだ困難な問題である。
実世界の騒がしいデータセットがいくつか提示されているが、列車のデータセット(すなわち、クリーンな画像と実際のノイズ画像のペア)の数は限られており、より実際のノイズデータセットを取得するのは手間と費用がかかる。
この問題を軽減するために,生成モデルを用いた実雑音モデルをシミュレートする試みが数多く研究されている。
それにもかかわらず、以前の作業では複数の異なるノイズ分布を扱うために複数のネットワークを訓練する必要があった。
対照的に,複数のノイズ分布を持つノイズ画像の合成が可能な新しい生成モデルを提案する。
具体的には,最近のコントラスト学習を用いて,ノイズの識別可能な潜在的特徴を学習する。
また,単一の参照雑音画像のみからノイズ特性を伝達することにより,新たなノイズ画像を生成することができる。
未知のノイズ除去と未知のノイズ除去の両方に対するノイズモデルの精度と有効性を示す。
関連論文リスト
- Realistic Noise Synthesis with Diffusion Models [68.48859665320828]
Deep Image Denoisingモデルは、しばしば高品質なパフォーマンスのために大量のトレーニングデータに依存します。
本稿では,拡散モデル,すなわちRealistic Noise Synthesize Diffusor(RNSD)を用いて現実的な雑音を合成する新しい手法を提案する。
RNSDは、より現実的なノイズや空間的相関を複数の周波数で生成できるような、ガイド付きマルチスケールコンテンツを組み込むことができる。
論文 参考訳(メタデータ) (2023-05-23T12:56:01Z) - Noise2NoiseFlow: Realistic Camera Noise Modeling without Clean Images [35.29066692454865]
本稿では,ノイズモデルとデノイザを同時にトレーニングするためのフレームワークを提案する。
ノイズ/クリーンなペア画像データではなく、ノイズの多いイメージのペアに依存します。
トレーニングされたデノイザーは、教師付きおよび弱教師付きベースラインデノイジングアプローチの両方において、大幅に改善される。
論文 参考訳(メタデータ) (2022-06-02T15:31:40Z) - Learning to Generate Realistic Noisy Images via Pixel-level Noise-aware
Adversarial Training [50.018580462619425]
我々は,PNGAN(Pixel-level Noise-aware Generative Adrial Network)という新しいフレームワークを提案する。
PNGANは、トレーニング済みのリアルデノイザーを使用して、フェイク画像とリアルノイズ画像をほぼノイズのないソリューション空間にマッピングする。
より優れたノイズフィッティングを実現するため,ジェネレータとしてSimple Multi-versa-scale Network (SMNet) を提案する。
論文 参考訳(メタデータ) (2022-04-06T14:09:02Z) - Estimating Fine-Grained Noise Model via Contrastive Learning [11.626812663592416]
本稿では,現実的な雑音画像生成のための革新的なノイズモデル推定とノイズ合成パイプラインを提案する。
本モデルでは, 微粒な統計的雑音モデルを用いた雑音推定モデルについて, 対照的に学習する。
いくつかのセンサのノイズモデルを校正することで、我々のモデルは他のカメラを予測できるように拡張することができる。
論文 参考訳(メタデータ) (2022-04-03T02:35:01Z) - C2N: Practical Generative Noise Modeling for Real-World Denoising [53.96391787869974]
両例を使わずに複雑な実世界の騒音を模倣するクリーン・ツー・ノイズ画像生成フレームワーク,すなわちC2Nを導入する。
我々は,C2Nの騒音発生器を実世界の騒音特性の成分に応じて構築し,広い範囲の騒音を正確に表現する。
論文 参考訳(メタデータ) (2022-02-19T05:53:46Z) - Physics-based Noise Modeling for Extreme Low-light Photography [63.65570751728917]
CMOS光センサの撮像パイプラインにおけるノイズ統計について検討する。
実雑音構造を正確に特徴付けることのできる包括的ノイズモデルを定式化する。
我々のノイズモデルは、学習に基づく低照度復調アルゴリズムのためのリアルなトレーニングデータを合成するのに利用できる。
論文 参考訳(メタデータ) (2021-08-04T16:36:29Z) - Neighbor2Neighbor: Self-Supervised Denoising from Single Noisy Images [98.82804259905478]
Neighbor2Neighborを提示し、ノイズの多い画像のみで効果的な画像消音モデルをトレーニングします。
ネットワークのトレーニングに使用される入力とターゲットは、同じノイズ画像からサブサンプリングされた画像である。
デノイジングネットワークは、第1段階で生成されたサブサンプルトレーニングペアで訓練され、提案された正規化器は、より良いパフォーマンスのための追加の損失として訓練される。
論文 参考訳(メタデータ) (2021-01-08T02:03:25Z) - Adaptive noise imitation for image denoising [58.21456707617451]
本研究では,自然雑音画像からノイズデータを合成できる新しいテキストバッファ適応ノイズ模倣(ADANI)アルゴリズムを開発した。
現実的なノイズを生成するため、ノイズ発生装置はノイズ発生のガイドとなる雑音/クリーン画像を入力として利用する。
ADANIから出力されるノイズデータとそれに対応する基盤構造とを結合すると、デノイングCNNは、完全に教師された方法で訓練される。
論文 参考訳(メタデータ) (2020-11-30T02:49:36Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。