論文の概要: PUCA: Patch-Unshuffle and Channel Attention for Enhanced Self-Supervised
Image Denoising
- arxiv url: http://arxiv.org/abs/2310.10088v1
- Date: Mon, 16 Oct 2023 05:42:49 GMT
- ステータス: 処理完了
- システム内更新日: 2023-10-17 16:20:08.372068
- Title: PUCA: Patch-Unshuffle and Channel Attention for Enhanced Self-Supervised
Image Denoising
- Title(参考訳): PUCA:自己監督型画像認識のためのパッチアンシャッフルとチャネルアテンション
- Authors: Hyemi Jang, Junsung Park, Dahuin Jung, Jaihyun Lew, Ho Bae, Sungroh
Yoon
- Abstract要約: 自己教師型認知のための新しいJ不変なU-NetアーキテクチャPUCAを提案する。
PUCAは最先端のパフォーマンスを達成し、自己監督型画像復調における既存の手法より優れている。
- 参考スコア(独自算出の注目度): 35.641029222760025
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Although supervised image denoising networks have shown remarkable
performance on synthesized noisy images, they often fail in practice due to the
difference between real and synthesized noise. Since clean-noisy image pairs
from the real world are extremely costly to gather, self-supervised learning,
which utilizes noisy input itself as a target, has been studied. To prevent a
self-supervised denoising model from learning identical mapping, each output
pixel should not be influenced by its corresponding input pixel; This
requirement is known as J-invariance. Blind-spot networks (BSNs) have been a
prevalent choice to ensure J-invariance in self-supervised image denoising.
However, constructing variations of BSNs by injecting additional operations
such as downsampling can expose blinded information, thereby violating
J-invariance. Consequently, convolutions designed specifically for BSNs have
been allowed only, limiting architectural flexibility. To overcome this
limitation, we propose PUCA, a novel J-invariant U-Net architecture, for
self-supervised denoising. PUCA leverages patch-unshuffle/shuffle to
dramatically expand receptive fields while maintaining J-invariance and dilated
attention blocks (DABs) for global context incorporation. Experimental results
demonstrate that PUCA achieves state-of-the-art performance, outperforming
existing methods in self-supervised image denoising.
- Abstract(参考訳): 教師付き画像デノイジングネットワークは、合成ノイズ画像において顕著な性能を示すが、実際のノイズと合成ノイズの違いにより、実際には失敗することが多い。
実世界のクリーンノイズ画像ペアは収集に非常にコストがかかるため、ノイズ入力自体をターゲットとする自己教師型学習が研究されている。
自己教師付き分母モデルが同一のマッピングを学習することを防止するため、各出力画素は対応する入力画素に影響されるべきではない。
ブラインドスポットネットワーク(bsns)は、自己教師付き画像の非分散を確実にするための一般的な選択肢である。
しかし、ダウンサンプリングなどの追加操作を注入してbsnのバリエーションを構築すると盲目的な情報を露呈し、j不変性に違反する可能性がある。
このため、BSN用に設計された畳み込みはアーキテクチャの柔軟性を制限してのみ許可されている。
この制限を克服するために,新しいJ不変なU-NetアーキテクチャであるPUCAを提案する。
PUCAはパッチアンシャッフル/シャッフルを利用して、J-不変性を維持しながら、グローバルなコンテキストインクルージョンのための拡張アテンションブロック(DAB)を劇的に拡張する。
実験結果から,PUCAは従来の自己教師型画像復調法よりも優れ,最先端の性能を実現していることが示された。
関連論文リスト
- Self-Calibrated Variance-Stabilizing Transformations for Real-World Image Denoising [19.08732222562782]
教師付き深層学習が画像認知のための選択方法となっている。
一般の信条とは対照的に,ガウスノイズ除去に特化するネットワークを有効活用し,実世界の画像復調に有効であることを示す。
論文 参考訳(メタデータ) (2024-07-24T16:23:46Z) - Random Sub-Samples Generation for Self-Supervised Real Image Denoising [9.459398471988724]
我々は,Smpling Different As Perturbation (SDAP) という,自己監督型実画像記述フレームワークを提案する。
トレーニング画像に適切な摂動を加えることで,BSNの性能を効果的に向上できることがわかった。
その結果、実世界のデータセット上で、最先端の自己教師型デノベーション手法を著しく上回っていることが明らかとなった。
論文 参考訳(メタデータ) (2023-07-31T16:39:35Z) - Self-supervised Image Denoising with Downsampled Invariance Loss and
Conditional Blind-Spot Network [12.478287906337194]
ほとんどの代表的自己監督型デノイザーは盲点ネットワークに基づいている。
標準的な盲点ネットワークは、ノイズの画素ワイド相関により、実際のカメラノイズを低減できない。
実雑音を除去できる新しい自己教師型トレーニングフレームワークを提案する。
論文 参考訳(メタデータ) (2023-04-19T08:55:27Z) - I2V: Towards Texture-Aware Self-Supervised Blind Denoising using
Self-Residual Learning for Real-World Images [8.763680382529412]
pixel-shuffle downsampling (PD) はノイズの空間的相関を排除するために提案されている。
テクスチャ情報を維持するために,PD処理を使わずに自己学習を提案する。
広汎な実験の結果,提案手法は最先端の自己監督型ブラインド・デノイング・アプローチよりも優れていた。
論文 参考訳(メタデータ) (2023-02-21T08:51:17Z) - Robust Deep Ensemble Method for Real-world Image Denoising [62.099271330458066]
そこで本研究では,実世界の画像認識のための単純なベイズディープアンサンブル(BDE)手法を提案する。
我々のBDEは、最先端の復調法よりも+0.28dBPSNRのゲインを達成している。
我々のBDEは他の画像復元タスクにも拡張でき、ベンチマークデータセット上で+0.30dB、+0.18dB、+0.12dB PSNRゲインを達成することができる。
論文 参考訳(メタデータ) (2022-06-08T06:19:30Z) - CVF-SID: Cyclic multi-Variate Function for Self-Supervised Image
Denoising by Disentangling Noise from Image [53.76319163746699]
そこで本研究では,CVF-SIDと呼ばれる,新しい,強力な自己監督型デノベーション手法を提案する。
CVF-SIDは、様々な自己教師付き損失項を活用することにより、入力からクリーンな画像とノイズマップを分離することができる。
最先端の自己監督型画像復調性能を達成し、既存のアプローチに匹敵する。
論文 参考訳(メタデータ) (2022-03-24T11:59:28Z) - AP-BSN: Self-Supervised Denoising for Real-World Images via Asymmetric
PD and Blind-Spot Network [60.650035708621786]
ブラインド・スポット・ネットワーク(BSN)とその変種は、自己監督型デノナイジングにおいて大きな進歩を遂げた。
自己教師付きBSNを用いて空間的に相関した実世界の雑音に対処することは困難である。
近年,実世界の雑音の空間的相関を取り除くために,画素シャッフルダウンサンプリング (PD) が提案されている。
本稿では,この問題に対処する非対称PD(AP)を提案する。
論文 参考訳(メタデータ) (2022-03-22T15:04:37Z) - Noise2Same: Optimizing A Self-Supervised Bound for Image Denoising [54.730707387866076]
本稿では,新しい自己教師型デノベーションフレームワークであるNoss2Sameを紹介する。
特にノイズ2Sameは、ノイズモデルに関するJ-不変性や余分な情報を必要としない。
以上の結果から,ノイズ2Sameは従来の自己監督型遮音法よりも優れていたことが示唆された。
論文 参考訳(メタデータ) (2020-10-22T18:12:26Z) - Fully Unsupervised Diversity Denoising with Convolutional Variational
Autoencoders [81.30960319178725]
完全畳み込み変分オートエンコーダ(VAE)に基づく復調手法であるDivNoisingを提案する。
まず, 撮像ノイズモデルをデコーダに明示的に組み込むことにより, 教師なしの雑音発生問題をVAEフレームワーク内に定式化する手法を提案する。
このようなノイズモデルは、ノイズの多いデータから測定したり、ブートストラップしたり、トレーニング中に共同学習したりすることが可能である。
論文 参考訳(メタデータ) (2020-06-10T21:28:13Z) - Variational Denoising Network: Toward Blind Noise Modeling and Removal [59.36166491196973]
ブラインド画像のデノイングはコンピュータビジョンにおいて重要な問題であるが、非常に難しい問題である。
本稿では,ノイズ推定と画像デノーミングを併用した新しい変分推論手法を提案する。
論文 参考訳(メタデータ) (2019-08-29T15:54:06Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。