論文の概要: Implicit Neural Representation Learning for Hyperspectral Image
Super-Resolution
- arxiv url: http://arxiv.org/abs/2112.10541v1
- Date: Mon, 20 Dec 2021 14:07:54 GMT
- ステータス: 処理完了
- システム内更新日: 2021-12-21 17:53:56.661421
- Title: Implicit Neural Representation Learning for Hyperspectral Image
Super-Resolution
- Title(参考訳): ハイパースペクトル画像超解像における入射神経表現学習
- Authors: Kaiwei Zhang
- Abstract要約: Inlicit Neural Representations (INR)は、新しい効果的な表現として進歩を遂げている。
本稿では、空間座標を対応するスペクトル放射率値にマッピングする連続関数により、HSIを表すINRに基づく新しいHSI再構成モデルを提案する。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Hyperspectral image (HSI) super-resolution without additional auxiliary image
remains a constant challenge due to its high-dimensional spectral patterns,
where learning an effective spatial and spectral representation is a
fundamental issue. Recently, Implicit Neural Representations (INRs) are making
strides as a novel and effective representation, especially in the
reconstruction task. Therefore, in this work, we propose a novel HSI
reconstruction model based on INR which represents HSI by a continuous function
mapping a spatial coordinate to its corresponding spectral radiance values. In
particular, as a specific implementation of INR, the parameters of parametric
model are predicted by a hypernetwork that operates on feature extraction using
convolution network. It makes the continuous functions map the spatial
coordinates to pixel values in a content-aware manner. Moreover, periodic
spatial encoding are deeply integrated with the reconstruction procedure, which
makes our model capable of recovering more high frequency details. To verify
the efficacy of our model, we conduct experiments on three HSI datasets (CAVE,
NUS, and NTIRE2018). Experimental results show that the proposed model can
achieve competitive reconstruction performance in comparison with the
state-of-the-art methods. In addition, we provide an ablation study on the
effect of individual components of our model. We hope this paper could server
as a potent reference for future research.
- Abstract(参考訳): ハイパースペクトル画像(HSI)は、高次元のスペクトルパターンのため、補助像を伴わない超解像であり、効果的な空間およびスペクトル表現を学習することが根本的な問題である。
近年,Inmplicit Neural Representations (INR) は,特に再建作業において,新規かつ効果的な表現として進歩を遂げている。
そこで本研究では,空間座標を対応するスペクトル放射輝度値にマッピングする連続関数によってhsiを表現するinrに基づく新しいhsi再構成モデルを提案する。
特に、INRの特定の実装として、パラメトリックモデルのパラメータは、畳み込みネットワークを用いて特徴抽出を行うハイパーネットワークによって予測される。
連続関数は、空間座標をコンテンツ認識の方法でピクセル値にマッピングする。
さらに, 周期的空間符号化は, 再構成手順と深く統合されているため, モデルでは, 高い周波数詳細を復元することができる。
本モデルの有効性を検証するため、3つのHSIデータセット(CAVE, NUS, NTIRE2018)で実験を行った。
実験の結果,提案手法は最先端手法と比較し,コンストラクション性能を向上できることがわかった。
また, モデルにおける個々の成分の影響について, アブレーション研究を行った。
この論文が将来の研究に強力な参考となることを願っている。
関連論文リスト
- HSRMamba: Contextual Spatial-Spectral State Space Model for Single Hyperspectral Super-Resolution [41.93421212397078]
Mambaは、その強力なグローバルモデリング能力と線形計算複雑性のために、視覚タスクにおいて例外的な性能を示した。
HSISRでは、Mambaは画像を1Dシーケンスに変換することで、局所的に隣接するピクセル間の空間-スペクトル構造関係を無視しているため、課題に直面している。
本研究では,HSISRにおける空間スペクトルモデリング状態空間モデルHSRMambaを提案する。
論文 参考訳(メタデータ) (2025-01-30T17:10:53Z) - Unleashing Correlation and Continuity for Hyperspectral Reconstruction from RGB Images [64.80875911446937]
RGB画像からのHSI再構成のための相関連続性ネットワーク(CCNet)を提案する。
局所スペクトルの相関について,GrSCM(Group-wise Spectral correlation Modeling)モジュールを紹介する。
グローバルスペクトルの連続性のために、我々はNeSCMモジュールを設計する。
論文 参考訳(メタデータ) (2025-01-02T15:14:40Z) - Efficient Visual State Space Model for Image Deblurring [83.57239834238035]
畳み込みニューラルネットワーク(CNN)とビジョントランスフォーマー(ViT)は、画像復元において優れた性能を発揮している。
本稿では,画像のデブロアに対する簡易かつ効果的な視覚状態空間モデル(EVSSM)を提案する。
論文 参考訳(メタデータ) (2024-05-23T09:13:36Z) - Hybrid Convolutional and Attention Network for Hyperspectral Image Denoising [54.110544509099526]
ハイパースペクトル画像(HSI)は、ハイパースペクトルデータの効果的な解析と解釈に重要である。
ハイブリット・コンボリューション・アテンション・ネットワーク(HCANet)を提案する。
主流HSIデータセットに対する実験結果は,提案したHCANetの合理性と有効性を示している。
論文 参考訳(メタデータ) (2024-03-15T07:18:43Z) - ESSAformer: Efficient Transformer for Hyperspectral Image
Super-resolution [76.7408734079706]
単一ハイパースペクトル像超解像(単一HSI-SR)は、低分解能観測から高分解能ハイパースペクトル像を復元することを目的としている。
本稿では,1つのHSI-SRの繰り返し精製構造を持つESSA注目組込みトランスフォーマネットワークであるESSAformerを提案する。
論文 参考訳(メタデータ) (2023-07-26T07:45:14Z) - HyperINR: A Fast and Predictive Hypernetwork for Implicit Neural
Representations via Knowledge Distillation [31.44962361819199]
Inlicit Neural Representations (INRs)は近年、科学的可視化の分野で大きな可能性を秘めている。
本稿では,コンパクトINRの重みを直接予測できる新しいハイパーネットワークアーキテクチャであるHyperINRを紹介する。
多分解能ハッシュ符号化ユニットのアンサンブルを一斉に利用することにより、INRは最先端の推論性能を得る。
論文 参考訳(メタデータ) (2023-04-09T08:10:10Z) - HDNet: High-resolution Dual-domain Learning for Spectral Compressive
Imaging [138.04956118993934]
HSI再構成のための高分解能デュアルドメイン学習ネットワーク(HDNet)を提案する。
一方、高効率な特徴融合によるHR空間スペクトルアテンションモジュールは、連続的かつ微細な画素レベルの特徴を提供する。
一方、HSI再構成のために周波数領域学習(FDL)を導入し、周波数領域の差を狭める。
論文 参考訳(メタデータ) (2022-03-04T06:37:45Z) - A Latent Encoder Coupled Generative Adversarial Network (LE-GAN) for
Efficient Hyperspectral Image Super-resolution [3.1023808510465627]
GAN(Generative Adversarial Network)は画像超解像のための効果的なディープラーニングフレームワークであることが証明されている。
モード崩壊の問題を緩和するため,本研究では,潜在エンコーダ(LE-GAN)と組み合わせた新しいGANモデルを提案する。
LE-GANは、生成したスペクトル空間の特徴を画像空間から潜在空間にマッピングし、生成したサンプルを正規化するための結合成分を生成する。
論文 参考訳(メタデータ) (2021-11-16T18:40:19Z) - Spatial-Spectral Residual Network for Hyperspectral Image
Super-Resolution [82.1739023587565]
ハイパースペクトル画像超解像のための新しいスペクトル空間残差ネットワーク(SSRNet)を提案する。
提案手法は,2次元畳み込みではなく3次元畳み込みを用いて空間スペクトル情報の探索を効果的に行うことができる。
各ユニットでは空間的・時間的分離可能な3次元畳み込みを用いて空間的・スペクトル的な情報を抽出する。
論文 参考訳(メタデータ) (2020-01-14T03:34:55Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。