論文の概要: Hyperspectral Image Reconstruction via Combinatorial Embedding of
Cross-Channel Spatio-Spectral Clues
- arxiv url: http://arxiv.org/abs/2312.11119v1
- Date: Mon, 18 Dec 2023 11:37:19 GMT
- ステータス: 処理完了
- システム内更新日: 2023-12-20 20:17:45.157471
- Title: Hyperspectral Image Reconstruction via Combinatorial Embedding of
Cross-Channel Spatio-Spectral Clues
- Title(参考訳): クロスチャネル空間スペクトル手がかりの組合せ埋め込みによるハイパースペクトル画像再構成
- Authors: Xingxing Yang, Jie Chen, Zaifeng Yang
- Abstract要約: 既存の学習に基づくハイパースペクトル再構成手法は、ハイパースペクトルバンド間の情報を完全に活用する際の限界を示す。
それぞれの超スペクトル空間における相互依存性について検討する。
これらの組み込み機能は、チャネル間相関をクエリすることで、完全に活用することができる。
- 参考スコア(独自算出の注目度): 6.580484964018551
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Existing learning-based hyperspectral reconstruction methods show limitations
in fully exploiting the information among the hyperspectral bands. As such, we
propose to investigate the chromatic inter-dependencies in their respective
hyperspectral embedding space. These embedded features can be fully exploited
by querying the inter-channel correlations in a combinatorial manner, with the
unique and complementary information efficiently fused into the final
prediction. We found such independent modeling and combinatorial excavation
mechanisms are extremely beneficial to uncover marginal spectral features,
especially in the long wavelength bands. In addition, we have proposed a
spatio-spectral attention block and a spectrum-fusion attention module, which
greatly facilitates the excavation and fusion of information at both
semantically long-range levels and fine-grained pixel levels across all
dimensions. Extensive quantitative and qualitative experiments show that our
method (dubbed CESST) achieves SOTA performance. Code for this project is at:
https://github.com/AlexYangxx/CESST.
- Abstract(参考訳): 既存の学習に基づくハイパースペクトル再構成手法は、ハイパースペクトルバンド間の情報を完全に活用する際の限界を示す。
そこで本研究では,それぞれの超スペクトル埋め込み空間における色間依存性について検討する。
これらの組込み機能は、チャネル間相関を組合せ形式でクエリすることで完全に活用でき、そのユニークで補完的な情報を最終予測に効率的に融合することができる。
我々は、特に長波長帯のスペクトルの特徴を明らかにするために、このような独立したモデリングと組合せ的掘削機構が極めて有用であることを見出した。
さらに,空間スペクトル注意ブロックとスペクトル拡散注意モジュールを提案し,意味論的に長距離かつ細粒度な画素レベルでの情報抽出と融合を大いに促進した。
大規模な定量的および定性的実験により,本手法(CESST)がSOTA性能を実現することを示す。
このプロジェクトのコードは以下の通りである。
関連論文リスト
- Unsupervised Hyperspectral and Multispectral Image Blind Fusion Based on Deep Tucker Decomposition Network with Spatial-Spectral Manifold Learning [15.86617273658407]
タッカー分解と空間スペクトル多様体学習(DTDNML)に基づくハイパースペクトル・マルチスペクトル画像の教師なしブラインド融合法を提案する。
本手法は,様々なリモートセンシングデータセット上でのハイパースペクトルとマルチスペクトル融合の精度と効率を向上させる。
論文 参考訳(メタデータ) (2024-09-15T08:58:26Z) - HTD-Mamba: Efficient Hyperspectral Target Detection with Pyramid State Space Model [5.505983410956103]
ハイパースペクトルターゲット検出(HTD)は、ピクセルレベルの複雑な背景から興味のある対象を特定する。
本稿では, HTD-Mamba というピラミッド状態空間モデル (SSM) を用いた効率的な自己教師型 HTD 手法を提案する。
4つの公開データセットで行った実験により,提案手法は定量評価と定性評価の両方において最先端の手法より優れていることが示された。
論文 参考訳(メタデータ) (2024-07-09T13:21:26Z) - HyperSIGMA: Hyperspectral Intelligence Comprehension Foundation Model [88.13261547704444]
Hyper SIGMAは、HSI解釈のためのビジョントランスフォーマーベースの基礎モデルである。
特別に設計されたスペクトル拡張モジュールを使用して、空間的特徴とスペクトル的特徴を統合する。
スケーラビリティ、堅牢性、クロスモーダル転送能力、実世界の適用性において大きなメリットがある。
論文 参考訳(メタデータ) (2024-06-17T13:22:58Z) - SSF-Net: Spatial-Spectral Fusion Network with Spectral Angle Awareness
for Hyperspectral Object Tracking [21.664141982246598]
ハイパースペクトルビデオ(HSV)は、空間的、スペクトル的、時間的情報を同時に提供する。
既存の手法は主にバンド再編成に重点を置いており、特徴抽出のためにRGBトラッカーに依存している。
本稿では、超スペクトル(HS)物体追跡において、スペクトル角認識(SST-Net)を用いた空間-スペクトル融合ネットワークを提案する。
論文 参考訳(メタデータ) (2024-03-09T09:37:13Z) - Cross-Scope Spatial-Spectral Information Aggregation for Hyperspectral
Image Super-Resolution [47.12985199570964]
超高分解能超高分解能画像の長距離空間およびスペクトル類似性を調べるために,新しいクロススコープ空間スペクトル変換器(CST)を提案する。
具体的には,長距離空間スペクトル特性を包括的にモデル化するために,空間次元とスペクトル次元のクロスアテンション機構を考案する。
3つの超スペクトルデータセットに対する実験により、提案したCSTは他の最先端手法よりも定量的にも視覚的にも優れていることが示された。
論文 参考訳(メタデータ) (2023-11-29T03:38:56Z) - Multi-Spectral Image Stitching via Spatial Graph Reasoning [52.27796682972484]
空間グラフ推論に基づくマルチスペクトル画像縫合法を提案する。
同一のビュー位置から複数スケールの補完機能をノードに埋め込む。
空間的・チャネル的次元に沿った長距離コヒーレンスを導入することにより、画素関係の相補性とチャネル相互依存性は、整列したマルチビュー特徴の再構築に寄与する。
論文 参考訳(メタデータ) (2023-07-31T15:04:52Z) - ESSAformer: Efficient Transformer for Hyperspectral Image
Super-resolution [76.7408734079706]
単一ハイパースペクトル像超解像(単一HSI-SR)は、低分解能観測から高分解能ハイパースペクトル像を復元することを目的としている。
本稿では,1つのHSI-SRの繰り返し精製構造を持つESSA注目組込みトランスフォーマネットワークであるESSAformerを提案する。
論文 参考訳(メタデータ) (2023-07-26T07:45:14Z) - Object Detection in Hyperspectral Image via Unified Spectral-Spatial
Feature Aggregation [55.9217962930169]
S2ADetは、高スペクトル画像に固有の豊富なスペクトル情報と空間補完情報を利用する物体検出器である。
S2ADetは既存の最先端メソッドを超え、堅牢で信頼性の高い結果を達成する。
論文 参考訳(メタデータ) (2023-06-14T09:01:50Z) - Mixed Attention Network for Hyperspectral Image Denoising [9.723155514555765]
我々は,低レベル・高レベルの空間的有意な特徴の相互作用だけでなく,スペクトル間相関とスペクトル内相関を同時に検討する混合注意ネットワーク(MAN)を提案する。
我々のMANは、低コストのパラメータとランニング時間を維持しながら、シミュレートされた実雑音設定における既存の最先端手法よりも優れています。
論文 参考訳(メタデータ) (2023-01-27T04:02:35Z) - Learning Spatial-Spectral Prior for Super-Resolution of Hyperspectral
Imagery [79.69449412334188]
本稿では,最先端の残差学習をベースとした単一グレー/RGB画像の超解像化手法について検討する。
本稿では,空間情報とハイパースペクトルデータのスペクトル間の相関をフル活用するための空間スペクトル先行ネットワーク(SSPN)を提案する。
実験結果から,SSPSR法により高分解能高分解能高分解能画像の詳細が得られた。
論文 参考訳(メタデータ) (2020-05-18T14:25:50Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。