論文の概要: Dynamic Attention-Guided Diffusion for Image Super-Resolution
- arxiv url: http://arxiv.org/abs/2308.07977v3
- Date: Thu, 7 Mar 2024 15:24:03 GMT
- ステータス: 処理完了
- システム内更新日: 2024-03-11 23:23:16.892367
- Title: Dynamic Attention-Guided Diffusion for Image Super-Resolution
- Title(参考訳): 画像超解像のための動的注意誘導拡散
- Authors: Brian B. Moser, Stanislav Frolov, Federico Raue, Sebastian Palacio and
Andreas Dengel
- Abstract要約: You Only Diffuse Areas (YODA)は、画像超解像(SR)のための動的注意誘導拡散法である。
我々は,先進拡散法SR3とSRDiffを拡張して,YODAを実証的に検証した。
実験では,PSNR,SSIM,LPIPSの計測値にまたがって,最先端のSRと汎用SRの新たな性能を示す。
- 参考スコア(独自算出の注目度): 10.082751617396474
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Diffusion models in image Super-Resolution (SR) treat all image regions with
uniform intensity, which risks compromising the overall image quality. To
address this, we introduce "You Only Diffuse Areas" (YODA), a dynamic
attention-guided diffusion method for image SR. YODA selectively focuses on
spatial regions using attention maps derived from the low-resolution image and
the current time step in the diffusion process. This time-dependent targeting
enables a more efficient conversion to high-resolution outputs by focusing on
areas that benefit the most from the iterative refinement process, i.e.,
detail-rich objects. We empirically validate YODA by extending leading
diffusion-based methods SR3 and SRDiff. Our experiments demonstrate new
state-of-the-art performance in face and general SR across PSNR, SSIM, and
LPIPS metrics. A notable finding is YODA's stabilization effect by reducing
color shifts, especially when training with small batch sizes.
- Abstract(参考訳): 画像超解法(SR)における拡散モデルは、全ての画像領域を均一な強度で処理し、全体の画質を損なうリスクがある。
そこで本稿では,画像SRのための動的注意誘導拡散法である"You Only Diffuse Areas"(YODA)を紹介する。
低解像度画像から得られた注意マップと拡散過程における現在の時間ステップを用いて空間領域に選択的に焦点をあてる。
この時間依存のターゲティングにより、反復的なリファインメントプロセス、すなわち詳細リッチなオブジェクトの恩恵を受ける領域に集中することで、より効率的な高分解能出力への変換が可能になる。
我々は,先導拡散法SR3とSRDiffを拡張して,YODAを実証的に検証した。
実験では,PSNR,SSIM,LPIPSの計測値にまたがって,最先端のSRと汎用SRの新たな性能を示す。
注目すべき発見は、特に小さなバッチサイズでのトレーニングにおいて、カラーシフトを減らすことで、YODAの安定化効果である。
関連論文リスト
- PASTA: Towards Flexible and Efficient HDR Imaging Via Progressively Aggregated Spatio-Temporal Alignment [91.38256332633544]
PASTAは、HDRデゴスティングのためのプログレッシブアグリゲーションアグリゲーション・時空間アライメントフレームワークである。
提案手法は,特徴分散中の階層的表現を活用することにより,有効性と効率性を実現する。
実験結果から,従来のSOTA法よりもPASTAの方が視覚的品質と性能の両方で優れていることが示された。
論文 参考訳(メタデータ) (2024-03-15T15:05:29Z) - Efficient Diffusion Model for Image Restoration by Residual Shifting [63.02725947015132]
本研究では,画像復元のための新しい,効率的な拡散モデルを提案する。
提案手法は,推論中の後処理の高速化を回避し,関連する性能劣化を回避する。
提案手法は,3つの古典的IRタスクにおける現在の最先端手法よりも優れた,あるいは同等の性能を実現する。
論文 参考訳(メタデータ) (2024-03-12T05:06:07Z) - Improving the Stability of Diffusion Models for Content Consistent
Super-Resolution [17.2713480052151]
画像超解像(SR)結果の知覚的品質を高めるために、事前学習した潜伏拡散モデルの生成先行が大きな可能性を証明している。
本稿では,画像構造を洗練させるために拡散モデルを用いるとともに,画像の微細化を図るために生成的対角トレーニングを採用することを提案する。
具体的には、画像主構造を再現するために、高効率で安定な、コンパクトな拡散ネットワークを訓練するための一様でないタイムステップ学習戦略を提案する。
論文 参考訳(メタデータ) (2023-12-30T10:22:59Z) - Global Structure-Aware Diffusion Process for Low-Light Image Enhancement [64.69154776202694]
本稿では,低照度画像強調問題に対処する拡散型フレームワークについて検討する。
我々は、その固有のODE-軌道の正規化を提唱する。
実験により,提案手法は低照度化において優れた性能を発揮することが示された。
論文 参考訳(メタデータ) (2023-10-26T17:01:52Z) - ResShift: Efficient Diffusion Model for Image Super-resolution by
Residual Shifting [70.83632337581034]
拡散に基づく画像超解像法(SR)は主に低推論速度によって制限される。
本稿では,SRの拡散段数を大幅に削減する新しい,効率的な拡散モデルを提案する。
本手法は,残差をシフトすることで高分解能画像と低分解能画像の間を移動させるマルコフ連鎖を構成する。
論文 参考訳(メタデータ) (2023-07-23T15:10:02Z) - ACDMSR: Accelerated Conditional Diffusion Models for Single Image
Super-Resolution [84.73658185158222]
本稿では,ACDMSRと呼ばれる拡散モデルに基づく超解像法を提案する。
提案手法は, 決定論的反復分解過程を通じて超解像を行うために, 標準拡散モデルに適応する。
提案手法は,低解像度画像に対してより視覚的に現実的な表現を生成し,現実的なシナリオにおけるその有効性を強調した。
論文 参考訳(メタデータ) (2023-07-03T06:49:04Z) - Low-Light Image Enhancement with Wavelet-based Diffusion Models [50.632343822790006]
拡散モデルは画像復元作業において有望な結果を得たが、時間を要する、過剰な計算資源消費、不安定な復元に悩まされている。
本稿では,DiffLLと呼ばれる高能率かつ高能率な拡散型低光画像強調手法を提案する。
論文 参考訳(メタデータ) (2023-06-01T03:08:28Z) - Waving Goodbye to Low-Res: A Diffusion-Wavelet Approach for Image
Super-Resolution [4.255342416942236]
本稿では、単一画像超解像(SISR)のための新しい拡散ウェーブレット(DiWa)アプローチを提案する。
拡散確率モデル(DDPM)と離散ウェーブレット変換(DWT)の長所を利用する。
DDPMをDWT領域で動作させることで、ウェーブレットスペクトル上の超解像に対する高周波情報を効果的に幻覚する。
論文 参考訳(メタデータ) (2023-04-04T17:52:49Z) - Guided Depth Super-Resolution by Deep Anisotropic Diffusion [18.445649181582823]
誘導異方性拡散と深層畳み込みネットワークを組み合わせた新しい手法を提案する。
誘導深度超解像のための3つの一般的なベンチマークで前例のない結果を得た。
論文 参考訳(メタデータ) (2022-11-21T15:48:13Z) - Boosting Image Super-Resolution Via Fusion of Complementary Information
Captured by Multi-Modal Sensors [21.264746234523678]
イメージスーパーレゾリューション(sr)は、低解像度光センサの画質を向上させる有望な技術である。
本稿では,安価なチャネル(可視・深度)からの補完情報を活用して,少ないパラメータを用いて高価なチャネル(熱)の画像品質を向上させる。
論文 参考訳(メタデータ) (2020-12-07T02:15:28Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。