論文の概要: Degradation-Noise-Aware Deep Unfolding Transformer for Hyperspectral
Image Denoising
- arxiv url: http://arxiv.org/abs/2305.04047v1
- Date: Sat, 6 May 2023 13:28:20 GMT
- ステータス: 処理完了
- システム内更新日: 2023-05-09 17:57:19.399957
- Title: Degradation-Noise-Aware Deep Unfolding Transformer for Hyperspectral
Image Denoising
- Title(参考訳): ハイパースペクトル画像デノージング用分解雑音対応ディープアンフォールディングトランス
- Authors: Haijin Zeng, Jiezhang Cao, Kai Feng, Shaoguang Huang, Hongyan Zhang,
Hiep Luong, Wilfried Philips
- Abstract要約: ハイパースペクトル画像(HSI)は、帯域幅が狭いため、ノイズが多いことが多い。
HSIデータキューブのノイズを低減するため、モデル駆動型と学習型の両方の復調アルゴリズムが提案されている。
本稿では,これらの問題に対処するDNA-Net(Degradation-Noise-Aware Unfolding Network)を提案する。
- 参考スコア(独自算出の注目度): 9.119226249676501
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Hyperspectral imaging (HI) has emerged as a powerful tool in diverse fields
such as medical diagnosis, industrial inspection, and agriculture, owing to its
ability to detect subtle differences in physical properties through high
spectral resolution. However, hyperspectral images (HSIs) are often quite noisy
because of narrow band spectral filtering. To reduce the noise in HSI data
cubes, both model-driven and learning-based denoising algorithms have been
proposed. However, model-based approaches rely on hand-crafted priors and
hyperparameters, while learning-based methods are incapable of estimating the
inherent degradation patterns and noise distributions in the imaging procedure,
which could inform supervised learning. Secondly, learning-based algorithms
predominantly rely on CNN and fail to capture long-range dependencies,
resulting in limited interpretability. This paper proposes a
Degradation-Noise-Aware Unfolding Network (DNA-Net) that addresses these
issues. Firstly, DNA-Net models sparse noise, Gaussian noise, and explicitly
represent image prior using transformer. Then the model is unfolded into an
end-to-end network, the hyperparameters within the model are estimated from the
noisy HSI and degradation model and utilizes them to control each iteration.
Additionally, we introduce a novel U-Shaped Local-Non-local-Spectral
Transformer (U-LNSA) that captures spectral correlation, local contents, and
non-local dependencies simultaneously. By integrating U-LNSA into DNA-Net, we
present the first Transformer-based deep unfolding HSI denoising method.
Experimental results show that DNA-Net outperforms state-of-the-art methods,
and the modeling of noise distributions helps in cases with heavy noise.
- Abstract(参考訳): ハイパースペクトルイメージング(HI)は、高スペクトル分解能によって物理特性の微妙な違いを検出する能力により、医学診断、産業検査、農業などの様々な分野において強力なツールとして登場した。
しかし、狭帯域のスペクトルフィルタリングのため、ハイパースペクトル画像(hsis)は非常にノイズが多い。
hsiデータキューブのノイズを低減するため、モデル駆動と学習に基づく分別アルゴリズムが提案されている。
しかしながら、モデルに基づくアプローチは手作りの事前処理とハイパーパラメータに依存するが、学習に基づく手法では、画像処理における固有の劣化パターンやノイズ分布を推定できないため、教師あり学習に影響を及ぼす可能性がある。
第二に、学習ベースのアルゴリズムは主としてCNNに依存しており、長距離依存関係をキャプチャできないため、解釈可能性に制限がある。
本稿では,これらの問題に対処するDNA-Net(Degradation-Noise-Aware Unfolding Network)を提案する。
第一に、DNA-Netモデルはスパースノイズ、ガウスノイズをモデル化し、トランスフォーマーを用いてイメージを明示的に表現する。
そして、モデルをエンドツーエンドのネットワークに展開し、ノイズの多いHSIと劣化モデルからモデル内のハイパーパラメータを推定し、各イテレーションを制御する。
さらに,スペクトル相関,局所コンテンツ,非局所依存性を同時に捉える新しいu字型局所非局所スペクトルトランス(u-lnsa)を導入する。
そこで,u-lnsaをdna-netに組み込むことにより,トランスフォーマーを用いたhsiデノイジング法を提案する。
実験の結果、DNA-Netは最先端の手法よりも優れており、ノイズ分布のモデル化は重音の場合に役立つことがわかった。
関連論文リスト
- Hybrid Convolutional and Attention Network for Hyperspectral Image Denoising [54.110544509099526]
ハイパースペクトル画像(HSI)は、ハイパースペクトルデータの効果的な解析と解釈に重要である。
ハイブリット・コンボリューション・アテンション・ネットワーク(HCANet)を提案する。
主流HSIデータセットに対する実験結果は,提案したHCANetの合理性と有効性を示している。
論文 参考訳(メタデータ) (2024-03-15T07:18:43Z) - Hyperspectral Image Denoising via Self-Modulating Convolutional Neural
Networks [15.700048595212051]
相関スペクトルと空間情報を利用した自己変調畳み込みニューラルネットワークを提案する。
モデルの中心には新しいブロックがあり、隣り合うスペクトルデータに基づいて、ネットワークが適応的に特徴を変換することができる。
合成データと実データの両方の実験解析により,提案したSM-CNNは,他の最先端HSI復調法よりも優れていることが示された。
論文 参考訳(メタデータ) (2023-09-15T06:57:43Z) - PRISTA-Net: Deep Iterative Shrinkage Thresholding Network for Coded
Diffraction Patterns Phase Retrieval [6.982256124089]
位相検索は、計算画像および画像処理における非線型逆問題である。
我々は,1次反復しきい値しきい値アルゴリズム(ISTA)に基づく深層展開ネットワークであるPRISTA-Netを開発した。
非線形変換,しきい値,ステップサイズなど,提案するPRISTA-Netフレームワークのパラメータはすべて,設定されるのではなく,エンドツーエンドで学習される。
論文 参考訳(メタデータ) (2023-09-08T07:37:15Z) - Spectral Enhanced Rectangle Transformer for Hyperspectral Image
Denoising [64.11157141177208]
ハイパースペクトル画像の空間的およびスペクトル的相関をモデル化するスペクトル拡張矩形変換器を提案する。
前者に対しては、長方形自己アテンションを水平および垂直に利用し、空間領域における非局所的類似性を捉える。
後者のために,空間スペクトル立方体の大域的低ランク特性を抽出し,雑音を抑制するスペクトル拡張モジュールを設計する。
論文 参考訳(メタデータ) (2023-04-03T09:42:13Z) - Multi-stage image denoising with the wavelet transform [125.2251438120701]
深部畳み込みニューラルネットワーク(Deep Convolutional Neural Network, CNN)は、正確な構造情報を自動マイニングすることで、画像の復調に使用される。
動的畳み込みブロック(DCB)、2つのカスケードウェーブレット変換および拡張ブロック(WEB)、残留ブロック(RB)の3段階を経由した、MWDCNNによるCNNの多段階化を提案する。
論文 参考訳(メタデータ) (2022-09-26T03:28:23Z) - Poisson2Sparse: Self-Supervised Poisson Denoising From a Single Image [34.27748767631027]
本稿では,単一画像の自己教師型学習手法を提案する。
繰り返しニューラルネットワークを用いた画像復調のための従来の反復最適化アルゴリズムを近似する。
提案手法はPSNRとSSIMの両面で最先端の手法より優れている。
論文 参考訳(メタデータ) (2022-06-04T00:08:58Z) - Coarse-to-Fine Sparse Transformer for Hyperspectral Image Reconstruction [138.04956118993934]
本稿では, サース・トゥ・ファインス・スパース・トランス (CST) を用いた新しいトランス方式を提案する。
HSI再構成のための深層学習にHSI空間を埋め込んだCST
特に,CSTは,提案したスペクトル認識スクリーニング機構(SASM)を粗いパッチ選択に使用し,選択したパッチを,細かなピクセルクラスタリングと自己相似性キャプチャのために,カスタマイズしたスペクトル集約ハッシュ型マルチヘッド自己アテンション(SAH-MSA)に入力する。
論文 参考訳(メタデータ) (2022-03-09T16:17:47Z) - Unsupervised Single Image Super-resolution Under Complex Noise [60.566471567837574]
本稿では,一般のSISRタスクを未知の劣化で扱うためのモデルベースunsupervised SISR法を提案する。
提案手法は, より小さなモデル (0.34M vs. 2.40M) だけでなく, より高速な技術 (SotA) 法 (約1dB PSNR) の現況を明らかに超えることができる。
論文 参考訳(メタデータ) (2021-07-02T11:55:40Z) - SMDS-Net: Model Guided Spectral-Spatial Network for Hyperspectral Image
Denoising [10.597014770267672]
ディープ・ラーニング (DL) に基づくハイパースペクトル画像 (HSI) 法は、観測されたノイズ画像と基礎となるクリーン画像との間の非線形マッピングを直接学習する。
本稿では,HSIデノベーションのための新しいモデルガイド付き解釈可能なネットワークを提案する。
論文 参考訳(メタデータ) (2020-12-03T11:05:01Z) - Robust Processing-In-Memory Neural Networks via Noise-Aware
Normalization [26.270754571140735]
PIM加速器は、しばしば物理的成分の固有のノイズに悩まされる。
雑音設定に対してロバストなニューラルネットワーク性能を実現するためのノイズ非依存手法を提案する。
論文 参考訳(メタデータ) (2020-07-07T06:51:28Z) - Variational Denoising Network: Toward Blind Noise Modeling and Removal [59.36166491196973]
ブラインド画像のデノイングはコンピュータビジョンにおいて重要な問題であるが、非常に難しい問題である。
本稿では,ノイズ推定と画像デノーミングを併用した新しい変分推論手法を提案する。
論文 参考訳(メタデータ) (2019-08-29T15:54:06Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。