論文の概要: HDNet: High-resolution Dual-domain Learning for Spectral Compressive
Imaging
- arxiv url: http://arxiv.org/abs/2203.02149v1
- Date: Fri, 4 Mar 2022 06:37:45 GMT
- ステータス: 処理完了
- システム内更新日: 2022-03-07 15:42:08.801304
- Title: HDNet: High-resolution Dual-domain Learning for Spectral Compressive
Imaging
- Title(参考訳): HDNet:スペクトル圧縮イメージングのための高分解能デュアルドメイン学習
- Authors: Xiaowan Hu, Yuanhao Cai, Jing Lin, Haoqian Wang, Xin Yuan, Yulun
Zhang, Radu Timofte, Luc Van Gool
- Abstract要約: HSI再構成のための高分解能デュアルドメイン学習ネットワーク(HDNet)を提案する。
一方、高効率な特徴融合によるHR空間スペクトルアテンションモジュールは、連続的かつ微細な画素レベルの特徴を提供する。
一方、HSI再構成のために周波数領域学習(FDL)を導入し、周波数領域の差を狭める。
- 参考スコア(独自算出の注目度): 138.04956118993934
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: The rapid development of deep learning provides a better solution for the
end-to-end reconstruction of hyperspectral image (HSI). However, existing
learning-based methods have two major defects. Firstly, networks with
self-attention usually sacrifice internal resolution to balance model
performance against complexity, losing fine-grained high-resolution (HR)
features. Secondly, even if the optimization focusing on spatial-spectral
domain learning (SDL) converges to the ideal solution, there is still a
significant visual difference between the reconstructed HSI and the truth.
Therefore, we propose a high-resolution dual-domain learning network (HDNet)
for HSI reconstruction. On the one hand, the proposed HR spatial-spectral
attention module with its efficient feature fusion provides continuous and fine
pixel-level features. On the other hand, frequency domain learning (FDL) is
introduced for HSI reconstruction to narrow the frequency domain discrepancy.
Dynamic FDL supervision forces the model to reconstruct fine-grained
frequencies and compensate for excessive smoothing and distortion caused by
pixel-level losses. The HR pixel-level attention and frequency-level refinement
in our HDNet mutually promote HSI perceptual quality. Extensive quantitative
and qualitative evaluation experiments show that our method achieves SOTA
performance on simulated and real HSI datasets. Code and models will be
released.
- Abstract(参考訳): ディープラーニングの急速な発展は、ハイパースペクトル画像(HSI)のエンドツーエンド再構成のためのより良いソリューションを提供する。
しかし,既存の学習手法には2つの大きな欠陥がある。
第一に、自己注意型のネットワークは通常、モデルパフォーマンスと複雑性のバランスをとるために内部解像度を犠牲にし、きめ細かい高解像度(HR)の機能を失う。
第二に、空間スペクトル領域学習(SDL)に焦点をあてた最適化が理想的な解に収束しても、再構成されたHSIと真理の間には大きな視覚的違いがある。
そこで本研究では,HSI再構成のための高分解能デュアルドメイン学習ネットワーク(HDNet)を提案する。
一方、高効率な特徴融合によるHR空間スペクトルアテンションモジュールは、連続的かつ微細な画素レベルの特徴を提供する。
一方、HSI再構成のために周波数領域学習(FDL)を導入し、周波数領域の差を狭める。
動的fdl監督により、モデルは細粒度周波数を再構成し、ピクセルレベルの損失による過剰な平滑化と歪みを補償する。
HDNetにおけるHRレベルの注意と周波数レベルの改善は、HSIの知覚品質を相互に促進する。
広範囲な定量的・定性評価実験により,シミュレーションおよび実hsiデータセット上でのsoma性能が得られた。
コードとモデルはリリースされる。
関連論文リスト
- Hybrid Convolutional and Attention Network for Hyperspectral Image Denoising [54.110544509099526]
ハイパースペクトル画像(HSI)は、ハイパースペクトルデータの効果的な解析と解釈に重要である。
ハイブリット・コンボリューション・アテンション・ネットワーク(HCANet)を提案する。
主流HSIデータセットに対する実験結果は,提案したHCANetの合理性と有効性を示している。
論文 参考訳(メタデータ) (2024-03-15T07:18:43Z) - HIR-Diff: Unsupervised Hyperspectral Image Restoration Via Improved
Diffusion Models [38.74983301496911]
ハイパースペクトル画像(HSI)の復元は、劣化した観察からクリーンなイメージを復元することを目的としている。
既存のモデルに基づく手法は、複雑な画像の特徴を正確にモデル化するのに限界がある。
本稿では,事前学習拡散モデル(HIR-Diff)を用いた教師なしHSI復元フレームワークを提案する。
論文 参考訳(メタデータ) (2024-02-24T17:15:05Z) - Hyperspectral Image Super-Resolution via Dual-domain Network Based on
Hybrid Convolution [6.3814314790000415]
本稿ではハイブリッド畳み込み(SRDNet)に基づく新しいHSI超解像アルゴリズムを提案する。
スペクトル間自己相似性を捉えるため、空間領域に自己注意学習機構(HSL)を考案する。
HSIの知覚品質をさらに向上するため、周波数領域のモデルを最適化するために周波数損失(HFL)を導入した。
論文 参考訳(メタデータ) (2023-04-10T13:51:28Z) - Hyperspectral Image Super-resolution with Deep Priors and Degradation
Model Inversion [6.0622962428871885]
核融合型ハイパースペクトル画像(HSI)の高分解能化が注目されている。
ディープラーニングアーキテクチャは、HSI超解像問題に対処するために使われてきた。
目的関数のデータ忠実度項における線形劣化モデルを用いる手法を提案する。
論文 参考訳(メタデータ) (2022-01-24T18:17:40Z) - Learning A 3D-CNN and Transformer Prior for Hyperspectral Image
Super-Resolution [80.93870349019332]
本稿では,CNN の代わりに Transformer を用いて HSI の事前学習を行う新しい HSISR 手法を提案する。
具体的には、まず勾配アルゴリズムを用いてHSISRモデルを解き、次に展開ネットワークを用いて反復解過程をシミュレートする。
論文 参考訳(メタデータ) (2021-11-27T15:38:57Z) - A Latent Encoder Coupled Generative Adversarial Network (LE-GAN) for
Efficient Hyperspectral Image Super-resolution [3.1023808510465627]
GAN(Generative Adversarial Network)は画像超解像のための効果的なディープラーニングフレームワークであることが証明されている。
モード崩壊の問題を緩和するため,本研究では,潜在エンコーダ(LE-GAN)と組み合わせた新しいGANモデルを提案する。
LE-GANは、生成したスペクトル空間の特徴を画像空間から潜在空間にマッピングし、生成したサンプルを正規化するための結合成分を生成する。
論文 参考訳(メタデータ) (2021-11-16T18:40:19Z) - Fourier Space Losses for Efficient Perceptual Image Super-Resolution [131.50099891772598]
提案した損失関数の適用のみで,最近導入された効率的なジェネレータアーキテクチャの性能向上が可能であることを示す。
フーリエ空間における周波数に対する損失の直接的強調は知覚的画質を著しく向上させることを示す。
訓練されたジェネレータは、最先端の知覚的SR法である RankSRGAN と SRFlow よりも2.4倍、48倍高速である。
論文 参考訳(メタデータ) (2021-06-01T20:34:52Z) - Cross-Attention in Coupled Unmixing Nets for Unsupervised Hyperspectral
Super-Resolution [79.97180849505294]
本稿では,HSIの空間分解能を高めるために,CUCaNetというクロスアテンション機構を備えた新しい結合型アンミックスネットワークを提案する。
3つの広く使われているHS-MSデータセットに対して、最先端のHSI-SRモデルと比較実験を行った。
論文 参考訳(メタデータ) (2020-07-10T08:08:20Z) - Hyperspectral Image Super-resolution via Deep Progressive Zero-centric
Residual Learning [62.52242684874278]
空間情報とスペクトル情報の相互モダリティ分布が問題となる。
本稿では,PZRes-Netという,新しいテクスライトウェイトなディープニューラルネットワークベースのフレームワークを提案する。
本フレームワークは,高分解能かつテクテッセロ中心の残像を学習し,シーンの空間的詳細を高頻度で表現する。
論文 参考訳(メタデータ) (2020-06-18T06:32:11Z) - Hyperspectral Image Super-resolution via Deep Spatio-spectral
Convolutional Neural Networks [32.10057746890683]
本稿では,高分解能ハイパースペクトル像と高分解能マルチスペクトル像を融合させる,深部畳み込みニューラルネットワークの簡易かつ効率的なアーキテクチャを提案する。
提案したネットワークアーキテクチャは,近年の最先端ハイパースペクトル画像の超解像化手法と比較して,最高の性能を達成している。
論文 参考訳(メタデータ) (2020-05-29T05:56:50Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。