論文の概要: Multi-Depth Branch Network for Efficient Image Super-Resolution
- arxiv url: http://arxiv.org/abs/2309.17334v2
- Date: Mon, 15 Jan 2024 09:05:34 GMT
- ステータス: 処理完了
- システム内更新日: 2024-01-18 01:21:24.418729
- Title: Multi-Depth Branch Network for Efficient Image Super-Resolution
- Title(参考訳): 効率的な画像超解像のための多層分岐ネットワーク
- Authors: Huiyuan Tian, Li Zhang, Shijian Li, Min Yao, Gang Pan
- Abstract要約: 超解像(SR)における長年の課題は、低解像(LR)の高頻度細部を効率的に拡張する方法である。
MDBM(Multi-Depth Branch Module)を特徴とする非対称SRアーキテクチャを提案する。
MDBMには異なる深さの枝があり、高い周波数と低周波の情報を同時に、効率的に捉えるように設計されている。
- 参考スコア(独自算出の注目度): 12.042706918188566
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: A longstanding challenge in Super-Resolution (SR) is how to efficiently
enhance high-frequency details in Low-Resolution (LR) images while maintaining
semantic coherence. This is particularly crucial in practical applications
where SR models are often deployed on low-power devices. To address this issue,
we propose an innovative asymmetric SR architecture featuring Multi-Depth
Branch Module (MDBM). These MDBMs contain branches of different depths,
designed to capture high- and low-frequency information simultaneously and
efficiently. The hierarchical structure of MDBM allows the deeper branch to
gradually accumulate fine-grained local details under the contextual guidance
of the shallower branch. We visualize this process using feature maps, and
further demonstrate the rationality and effectiveness of this design using
proposed novel Fourier spectral analysis methods. Moreover, our model exhibits
more significant spectral differentiation between branches than existing branch
networks. This suggests that MDBM reduces feature redundancy and offers a more
effective method for integrating high- and low-frequency information. Extensive
qualitative and quantitative evaluations on various datasets show that our
model can generate structurally consistent and visually realistic HR images. It
achieves state-of-the-art (SOTA) results at a very fast inference speed. Our
code is available at https://github.com/thy960112/MDBN.
- Abstract(参考訳): 超解法(SR)における長年の課題は、意味的コヒーレンスを維持しながら、低解法(LR)画像の高周波詳細を効率的に向上する方法である。
これは、SRモデルが低消費電力デバイスにしばしばデプロイされる実用的なアプリケーションにおいて特に重要である。
本稿では,MDBM(Multi-Depth Branch Module)を特徴とする非対称SRアーキテクチャを提案する。
これらのMDBMは、高頻度と低周波の情報を同時に、効率的に捉えるように設計されている。
MDBMの階層構造により、より深い枝は、より浅い枝の文脈的ガイダンスの下で、より微細な局所的な詳細を徐々に蓄積することができる。
この過程を特徴地図を用いて可視化し, 提案するフーリエスペクトル解析法を用いて, 設計の合理性と有効性を示す。
さらに,本モデルでは,既存の分岐ネットワークよりも,分岐間のスペクトル差が顕著である。
これはMDBMが特徴冗長性を低減し、高周波数情報と低周波情報を統合するためのより効果的な方法を提供することを示唆している。
各種データセットの定性的・定量的評価により, 構造的に一貫性があり, 視覚的にもリアルなHR画像を生成することができることを示す。
最先端(SOTA)の結果を高速な推論速度で達成する。
私たちのコードはhttps://github.com/thy960112/mdbnで利用可能です。
関連論文リスト
- DSR-Diff: Depth Map Super-Resolution with Diffusion Model [38.68563026759223]
本稿では,遅延空間内の拡散モデルを用いて,深度マップの超解像誘導を行う新しいCDSRパラダイムを提案する。
提案手法は,最先端手法と比較して,広範囲な実験において優れた性能を示した。
論文 参考訳(メタデータ) (2023-11-16T14:18:10Z) - RBSR: Efficient and Flexible Recurrent Network for Burst
Super-Resolution [57.98314517861539]
バースト超解像(BurstSR)は、高解像度(HR)画像を低解像度(LR)画像と雑音画像から再構成することを目的としている。
本稿では,効率よくフレキシブルなリカレントネットワークでフレーム単位のキューを融合させることを提案する。
論文 参考訳(メタデータ) (2023-06-30T12:14:13Z) - Learning Detail-Structure Alternative Optimization for Blind
Super-Resolution [69.11604249813304]
そこで我々は,ブラインドSRに先立ってカーネルを曖昧にすることなく,再帰的な詳細構造代替最適化を実現する,有効かつカーネルフリーなネットワークDSSRを提案する。
DSSRでは、細部構造変調モジュール(DSMM)が構築され、画像の詳細と構造の相互作用と協調を利用する。
本手法は既存の手法に対して最先端の手法を実現する。
論文 参考訳(メタデータ) (2022-12-03T14:44:17Z) - High-resolution Depth Maps Imaging via Attention-based Hierarchical
Multi-modal Fusion [84.24973877109181]
誘導DSRのための新しい注意に基づく階層型マルチモーダル融合ネットワークを提案する。
本手法は,再現精度,動作速度,メモリ効率の点で最先端手法よりも優れていることを示す。
論文 参考訳(メタデータ) (2021-04-04T03:28:33Z) - Deep Burst Super-Resolution [165.90445859851448]
バースト超解像タスクのための新しいアーキテクチャを提案する。
我々のネットワークは複数のノイズRAW画像を入力として取り出し、出力として分解された超解像RGB画像を生成する。
実世界のデータのトレーニングと評価を可能にするため,BurstSRデータセットも導入する。
論文 参考訳(メタデータ) (2021-01-26T18:57:21Z) - Cross-MPI: Cross-scale Stereo for Image Super-Resolution using
Multiplane Images [44.85260985973405]
Cross-MPIは、新しい平面対応MPI機構、マルチスケールガイドアップサンプリングモジュール、超高分解能合成・融合モジュールからなるエンドツーエンドのRefSRネットワークである。
デジタル合成および光ズームクロススケールデータによる実験結果から,Cross-MPIフレームワークは既存のRefSR手法よりも優れた性能が得られることが示された。
論文 参考訳(メタデータ) (2020-11-30T09:14:07Z) - Accurate and Lightweight Image Super-Resolution with Model-Guided Deep
Unfolding Network [63.69237156340457]
我々は、モデル誘導深部展開ネットワーク(MoG-DUN)と呼ばれるSISRに対する説明可能なアプローチを提示し、提唱する。
MoG-DUNは正確(エイリアスを少なくする)、計算効率(モデルパラメータを減らした)、多用途(多重劣化を処理できる)である。
RCAN, SRDNF, SRFBNを含む既存の最先端画像手法に対するMoG-DUN手法の優位性は、いくつかの一般的なデータセットと様々な劣化シナリオに関する広範な実験によって実証されている。
論文 参考訳(メタデータ) (2020-09-14T08:23:37Z) - Hyperspectral Image Super-resolution via Deep Spatio-spectral
Convolutional Neural Networks [32.10057746890683]
本稿では,高分解能ハイパースペクトル像と高分解能マルチスペクトル像を融合させる,深部畳み込みニューラルネットワークの簡易かつ効率的なアーキテクチャを提案する。
提案したネットワークアーキテクチャは,近年の最先端ハイパースペクトル画像の超解像化手法と比較して,最高の性能を達成している。
論文 参考訳(メタデータ) (2020-05-29T05:56:50Z) - Learning Enriched Features for Real Image Restoration and Enhancement [166.17296369600774]
畳み込みニューラルネットワーク(CNN)は、画像復元作業における従来のアプローチよりも劇的に改善されている。
ネットワーク全体を通して空間的精度の高い高解像度表現を維持することを目的とした,新しいアーキテクチャを提案する。
提案手法は,高解像度の空間的詳細を同時に保存しながら,複数のスケールからの文脈情報を組み合わせた豊富な特徴集合を学習する。
論文 参考訳(メタデータ) (2020-03-15T11:04:30Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。