論文の概要: Mosaic Super-resolution via Sequential Feature Pyramid Networks
- arxiv url: http://arxiv.org/abs/2004.06853v1
- Date: Wed, 15 Apr 2020 01:46:24 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-13 03:24:15.356260
- Title: Mosaic Super-resolution via Sequential Feature Pyramid Networks
- Title(参考訳): 逐次特徴ピラミッドネットワークによるモザイク超解像
- Authors: Mehrdad Shoeiby, Mohammad Ali Armin, Sadegh Aliakbarian, Saeed Anwar,
Lars Petersson
- Abstract要約: 実時間単発モザイクセンサで撮影した生モザイク画像の超高分解能化手法を提案する。
我々は,ネットワークの深さに沿った連続的な特徴ピラミッドの恩恵を受ける,深い超解像アーキテクチャを設計する。
提案手法は,バイエル像とマルチスペクトル像の両面において,モザイク超解像法よりも優れた高解像度化を実現する。
- 参考スコア(独自算出の注目度): 32.23630623103639
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Advances in the design of multi-spectral cameras have led to great interests
in a wide range of applications, from astronomy to autonomous driving. However,
such cameras inherently suffer from a trade-off between the spatial and
spectral resolution. In this paper, we propose to address this limitation by
introducing a novel method to carry out super-resolution on raw mosaic images,
multi-spectral or RGB Bayer, captured by modern real-time single-shot mosaic
sensors. To this end, we design a deep super-resolution architecture that
benefits from a sequential feature pyramid along the depth of the network.
This, in fact, is achieved by utilizing a convolutional LSTM (ConvLSTM) to
learn the inter-dependencies between features at different receptive fields.
Additionally, by investigating the effect of different attention mechanisms in
our framework, we show that a ConvLSTM inspired module is able to provide
superior attention in our context. Our extensive experiments and analyses
evidence that our approach yields significant super-resolution quality,
outperforming current state-of-the-art mosaic super-resolution methods on both
Bayer and multi-spectral images. Additionally, to the best of our knowledge,
our method is the first specialized method to super-resolve mosaic images,
whether it be multi-spectral or Bayer.
- Abstract(参考訳): マルチスペクトルカメラの設計の進歩は、天文学から自動運転まで、幅広い応用分野において大きな関心を寄せている。
しかし、このようなカメラは本質的に空間分解能とスペクトル分解能のトレードオフに悩まされている。
本稿では,近年のリアルタイム・シングルショット・モザイク・センサを用いて,生モザイク画像,マルチスペクトルまたはrgbバイヤーの超解像を行う新しい手法を提案する。
この目的のために、ネットワークの深さに沿ったシーケンシャルな特徴ピラミッドの恩恵を受ける、深い超解像アーキテクチャを設計する。
これは、畳み込みLSTM(ConvLSTM)を利用して、異なる受容領域における特徴間の依存性を学習することで実現される。
さらに,我々のフレームワークにおける異なる注意機構の効果を調べることにより,convlstmにインスパイアされたモジュールが我々のコンテキストにおいて優れた注意を向けることができることを示す。
広範にわたる実験と解析の結果,本手法はバイエル像とマルチスペクトル像の両面において,最先端のモザイク超解像法よりも優れた高分解能性が得られることが示された。
さらに,本手法は,マルチスペクトルでもバイエルでも,モザイク画像の超解像法としては最初のものである。
関連論文リスト
- A Global Depth-Range-Free Multi-View Stereo Transformer Network with Pose Embedding [76.44979557843367]
本稿では,事前の深度範囲を排除した新しい多視点ステレオ(MVS)フレームワークを提案する。
長距離コンテキスト情報を集約するMDA(Multi-view Disparity Attention)モジュールを導入する。
ソース画像のエピポーラ線上のサンプリング点に対応する電流画素の品質を明示的に推定する。
論文 参考訳(メタデータ) (2024-11-04T08:50:16Z) - Multi-Head Attention Residual Unfolded Network for Model-Based Pansharpening [2.874893537471256]
展開融合法は、ディープラーニングの強力な表現能力とモデルベースアプローチの堅牢性を統合する。
本稿では,衛星画像融合のためのモデルに基づく深部展開手法を提案する。
PRISMA、Quickbird、WorldView2データセットの実験結果から、本手法の優れた性能が示された。
論文 参考訳(メタデータ) (2024-09-04T13:05:00Z) - Deep 3D World Models for Multi-Image Super-Resolution Beyond Optical
Flow [27.31768206943397]
マルチイメージ・スーパーレゾリューション(MISR)は、複数の画像を組み合わせることで、低解像度(LR)取得の空間分解能を高めることができる。
提案したモデルであるEpiMISRは,光学的流れから離れ,取得過程のエピポーラ幾何学を明示的に用いている。
論文 参考訳(メタデータ) (2024-01-30T12:55:49Z) - Decoupled-and-Coupled Networks: Self-Supervised Hyperspectral Image
Super-Resolution with Subpixel Fusion [67.35540259040806]
サブピクセルレベルのHS超解像フレームワークを提案する。
名前が示すように、DC-Netはまず入力を共通(またはクロスセンサー)とセンサー固有のコンポーネントに分離する。
我々は,CSUネットの裏側に自己教師付き学習モジュールを付加し,素材の整合性を保証し,復元されたHS製品の詳細な外観を向上する。
論文 参考訳(メタデータ) (2022-05-07T23:40:36Z) - Image-specific Convolutional Kernel Modulation for Single Image
Super-resolution [85.09413241502209]
本稿では,新しい画像特異的畳み込み変調カーネル(IKM)を提案する。
我々は、画像や特徴のグローバルな文脈情報を利用して、畳み込みカーネルを適応的に調整するための注意重みを生成する。
単一画像超解像実験により,提案手法は最先端手法よりも優れた性能を示した。
論文 参考訳(メタデータ) (2021-11-16T11:05:10Z) - Fusformer: A Transformer-based Fusion Approach for Hyperspectral Image
Super-resolution [9.022005574190182]
低分解能ハイパースペクトル像と高分解能マルチスペクトル像を融合させるトランスフォーマーに基づくネットワークを設計する。
LR-HSIは主スペクトル構造を持つため、ネットワークは空間的詳細推定に重点を置いている。
様々な実験と品質指標は、他の最先端手法と比較して、我々のアプローチの優位性を示している。
論文 参考訳(メタデータ) (2021-09-05T14:00:34Z) - Efficient and Accurate Multi-scale Topological Network for Single Image
Dehazing [31.543771270803056]
本稿では,入力画像自体の特徴抽出と利用に注意を払います。
本稿では,マルチスケールトポロジカルネットワーク (mstn) を提案する。
一方、我々は、異なるスケールで機能の選択と融合を達成するために、マルチスケール機能融合モジュール(MFFM)と適応機能選択モジュール(AFSM)を設計します。
論文 参考訳(メタデータ) (2021-02-24T08:53:14Z) - Deep Burst Super-Resolution [165.90445859851448]
バースト超解像タスクのための新しいアーキテクチャを提案する。
我々のネットワークは複数のノイズRAW画像を入力として取り出し、出力として分解された超解像RGB画像を生成する。
実世界のデータのトレーニングと評価を可能にするため,BurstSRデータセットも導入する。
論文 参考訳(メタデータ) (2021-01-26T18:57:21Z) - Cross-MPI: Cross-scale Stereo for Image Super-Resolution using
Multiplane Images [44.85260985973405]
Cross-MPIは、新しい平面対応MPI機構、マルチスケールガイドアップサンプリングモジュール、超高分解能合成・融合モジュールからなるエンドツーエンドのRefSRネットワークである。
デジタル合成および光ズームクロススケールデータによる実験結果から,Cross-MPIフレームワークは既存のRefSR手法よりも優れた性能が得られることが示された。
論文 参考訳(メタデータ) (2020-11-30T09:14:07Z) - MuCAN: Multi-Correspondence Aggregation Network for Video
Super-Resolution [63.02785017714131]
ビデオ超解像(VSR)は、複数の低解像度フレームを使用して、各フレームに対して高解像度の予測を生成することを目的としている。
フレーム間およびフレーム内は、時間的および空間的情報を利用するための鍵となるソースである。
VSRのための効果的なマルチ対応アグリゲーションネットワーク(MuCAN)を構築した。
論文 参考訳(メタデータ) (2020-07-23T05:41:27Z) - Learning Enriched Features for Real Image Restoration and Enhancement [166.17296369600774]
畳み込みニューラルネットワーク(CNN)は、画像復元作業における従来のアプローチよりも劇的に改善されている。
ネットワーク全体を通して空間的精度の高い高解像度表現を維持することを目的とした,新しいアーキテクチャを提案する。
提案手法は,高解像度の空間的詳細を同時に保存しながら,複数のスケールからの文脈情報を組み合わせた豊富な特徴集合を学習する。
論文 参考訳(メタデータ) (2020-03-15T11:04:30Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。