論文の概要: Learning Model-Blind Temporal Denoisers without Ground Truths
- arxiv url: http://arxiv.org/abs/2007.03241v2
- Date: Wed, 31 Mar 2021 13:51:22 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-12 20:01:13.956665
- Title: Learning Model-Blind Temporal Denoisers without Ground Truths
- Title(参考訳): 基底真理をもたない学習モデルに基づく時空デノイザ
- Authors: Yanghao Li, Bichuan Guo, Jiangtao Wen, Zhen Xia, Shan Liu, Yuxing Han
- Abstract要約: 合成データで訓練されたデノイザーは、未知のノイズの多様性に対処できないことが多い。
従来の画像ベース手法は、ビデオデノイザに直接適用した場合、ノイズが過度に収まる。
本稿では,これらの課題に対処する上で有効な,ビデオ・デノベーション・ネットワークの汎用フレームワークを提案する。
- 参考スコア(独自算出の注目度): 46.778450578529814
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Denoisers trained with synthetic data often fail to cope with the diversity
of unknown noises, giving way to methods that can adapt to existing noise
without knowing its ground truth. Previous image-based method leads to noise
overfitting if directly applied to video denoisers, and has inadequate temporal
information management especially in terms of occlusion and lighting variation,
which considerably hinders its denoising performance. In this paper, we propose
a general framework for video denoising networks that successfully addresses
these challenges. A novel twin sampler assembles training data by decoupling
inputs from targets without altering semantics, which not only effectively
solves the noise overfitting problem, but also generates better occlusion masks
efficiently by checking optical flow consistency. An online denoising scheme
and a warping loss regularizer are employed for better temporal alignment.
Lighting variation is quantified based on the local similarity of aligned
frames. Our method consistently outperforms the prior art by 0.6-3.2dB PSNR on
multiple noises, datasets and network architectures. State-of-the-art results
on reducing model-blind video noises are achieved. Extensive ablation studies
are conducted to demonstrate the significance of each technical components.
- Abstract(参考訳): 合成データで訓練されたデノイザーは、しばしば未知のノイズの多様性に対処できず、既存のノイズに適応できる手法を基礎的な真理を知らずに提供します。
従来の画像ベース手法では、ビデオデノイザに直接適用した場合はノイズ過度に適応し、特に隠蔽や照明の変動に関して時間的情報管理が不十分であり、デノイザの性能を著しく損なう。
本稿では,これらの課題に対処するために,ビデオデノベーションネットワークの汎用フレームワークを提案する。
新たなツインサンプリング器は、セマンティクスを変更せずにターゲットからの入力を分離してトレーニングデータを収集し、ノイズ過収問題を効果的に解決するだけでなく、光学流の整合性をチェックすることにより、より優れた閉塞マスクを効率よく生成する。
時間的アライメントを改善するために、オンラインデノーミングスキームとワーピングロスレギュレータが使用される。
配向フレームの局所的類似性に基づいて照明変動を定量化する。
提案手法は,複数のノイズ,データセット,ネットワークアーキテクチャにおいて,0.6-3.2dbpsnrで先行技術を上回る。
モデルブラインド映像ノイズの低減に関する最新の結果が得られた。
各技術要素の意義を実証するために広範なアブレーション研究が行われている。
関連論文リスト
- Advancing Unsupervised Low-light Image Enhancement: Noise Estimation, Illumination Interpolation, and Self-Regulation [55.07472635587852]
低光画像強調(LLIE)技術は、画像の詳細の保存とコントラストの強化に顕著な進歩をもたらした。
これらのアプローチは、動的ノイズを効率的に緩和し、様々な低照度シナリオを収容する上で、永続的な課題に直面する。
まず,低照度画像の雑音レベルを迅速かつ高精度に推定する方法を提案する。
次に、照明と入力の一般的な制約を満たすために、Learningable Illumination Interpolator (LII) を考案する。
論文 参考訳(メタデータ) (2023-05-17T13:56:48Z) - Blind2Sound: Self-Supervised Image Denoising without Residual Noise [5.192255321684027]
Poisson-Gaussianノイズに対する自己監督型視覚障害は依然として困難な課題である。
そこで我々はBlind2Soundを提案する。Blind2Soundは難聴画像の残音を克服するシンプルで効果的な手法である。
論文 参考訳(メタデータ) (2023-03-09T11:21:59Z) - IDR: Self-Supervised Image Denoising via Iterative Data Refinement [66.5510583957863]
本稿では,最先端のデノナイジング性能を実現するために,教師なしの実用的なデノナイジング手法を提案する。
本手法では, 1つのノイズ画像と1つのノイズモデルしか必要とせず, 実際の生画像に容易にアクセス可能である。
実世界のアプリケーションにおける生画像復調性能を評価するため,500シーンのシーンを含む高品質な生画像データセットSenseNoise-500を構築した。
論文 参考訳(メタデータ) (2021-11-29T07:22:53Z) - Image Denoising using Attention-Residual Convolutional Neural Networks [0.0]
本稿では,学習に基づく新たな非盲検手法であるAttention Residual Convolutional Neural Network (ARCNN)を提案し,その拡張としてFlexible Attention Residual Convolutional Neural Network (FARCNN)を提案する。
ARCNNはガウス語とポアソン語で約0.44dBと0.96dBの平均PSNR結果を達成し、FARCNNはARCNNに比べて若干パフォーマンスが悪くても非常に一貫した結果を示した。
論文 参考訳(メタデータ) (2021-01-19T16:37:57Z) - Neighbor2Neighbor: Self-Supervised Denoising from Single Noisy Images [98.82804259905478]
Neighbor2Neighborを提示し、ノイズの多い画像のみで効果的な画像消音モデルをトレーニングします。
ネットワークのトレーニングに使用される入力とターゲットは、同じノイズ画像からサブサンプリングされた画像である。
デノイジングネットワークは、第1段階で生成されたサブサンプルトレーニングペアで訓練され、提案された正規化器は、より良いパフォーマンスのための追加の損失として訓練される。
論文 参考訳(メタデータ) (2021-01-08T02:03:25Z) - Noise2Kernel: Adaptive Self-Supervised Blind Denoising using a Dilated
Convolutional Kernel Architecture [3.796436257221662]
本研究では,不変性を満たす拡張畳み込みネットワークを提案し,ランダムマスキングを使わずに効率的なカーネルベーストレーニングを実現する。
また,ゼロ平均制約を回避し,塩とペッパーまたはハイブリッドノイズの除去に有効である適応型自己超過損失を提案する。
論文 参考訳(メタデータ) (2020-12-07T12:13:17Z) - Adaptive noise imitation for image denoising [58.21456707617451]
本研究では,自然雑音画像からノイズデータを合成できる新しいテキストバッファ適応ノイズ模倣(ADANI)アルゴリズムを開発した。
現実的なノイズを生成するため、ノイズ発生装置はノイズ発生のガイドとなる雑音/クリーン画像を入力として利用する。
ADANIから出力されるノイズデータとそれに対応する基盤構造とを結合すると、デノイングCNNは、完全に教師された方法で訓練される。
論文 参考訳(メタデータ) (2020-11-30T02:49:36Z) - Variational Denoising Network: Toward Blind Noise Modeling and Removal [59.36166491196973]
ブラインド画像のデノイングはコンピュータビジョンにおいて重要な問題であるが、非常に難しい問題である。
本稿では,ノイズ推定と画像デノーミングを併用した新しい変分推論手法を提案する。
論文 参考訳(メタデータ) (2019-08-29T15:54:06Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。