論文の概要: Image Deblurring with Domain Generalizable Diffusion Models
- arxiv url: http://arxiv.org/abs/2212.01789v1
- Date: Sun, 4 Dec 2022 10:40:35 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-06 17:15:54.854934
- Title: Image Deblurring with Domain Generalizable Diffusion Models
- Title(参考訳): 領域一般化拡散モデルによる画像の劣化
- Authors: Mengwei Ren, Mauricio Delbracio, Hossein Talebi, Guido Gerig, Peyman
Milanfar
- Abstract要約: 拡散確率モデル (DPM) は画像の劣化に用いられている。
ICDPMは合成一対のトレーニングデータ(ドメイン内)に依存しており、現実世界の見えない画像に対して、潜在的に不明確なロバスト性を持つ。
本稿では,アーティファクトを大幅に緩和し,アウト・オブ・ディストリビューション性能を向上させるための,シンプルだが効果的なガイダンスを提案する。
- 参考スコア(独自算出の注目度): 14.463214400904306
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Diffusion Probabilistic Models (DPMs) have recently been employed for image
deblurring. DPMs are trained via a stochastic denoising process that maps
Gaussian noise to the high-quality image, conditioned on the concatenated
blurry input. Despite their high-quality generated samples, image-conditioned
Diffusion Probabilistic Models (icDPM) rely on synthetic pairwise training data
(in-domain), with potentially unclear robustness towards real-world unseen
images (out-of-domain). In this work, we investigate the generalization ability
of icDPMs in deblurring, and propose a simple but effective guidance to
significantly alleviate artifacts, and improve the out-of-distribution
performance. Particularly, we propose to first extract a multiscale
domain-generalizable representation from the input image that removes
domain-specific information while preserving the underlying image structure.
The representation is then added into the feature maps of the conditional
diffusion model as an extra guidance that helps improving the generalization.
To benchmark, we focus on out-of-distribution performance by applying a
single-dataset trained model to three external and diverse test sets. The
effectiveness of the proposed formulation is demonstrated by improvements over
the standard icDPM, as well as state-of-the-art performance on perceptual
quality and competitive distortion metrics compared to existing methods.
- Abstract(参考訳): DPM(Diffusion Probabilistic Models)は近年,画像の劣化に用いられている。
DPMは、結合したぼやけた入力に基づいて、ガウスノイズを高品質な画像にマッピングする確率的デノナイジングプロセスによって訓練される。
高品質に生成されたサンプルにもかかわらず、画像条件付き拡散確率モデル(icDPM)は、実世界の見えない画像(ドメイン外)に対する潜在的に不明確な堅牢性を持つ合成ペアトレーニングデータ(ドメイン内)に依存している。
本研究では,デブラリングにおけるicdpmの一般化について検討し,アーティファクトを著しく軽減するための簡易かつ効果的なガイダンスを提案し,分散性能を向上させる。
特に,入力画像から複数の領域を一般化可能な表現を抽出し,基礎となる画像構造を保ちながらドメイン固有情報を除去する手法を提案する。
表現は、一般化を改善する追加のガイダンスとして条件拡散モデルの特徴マップに追加される。
ベンチマークでは,外部および多種多様なテストセットに単一データセットのトレーニングモデルを適用することで,分散性能に重点を置きます。
提案手法の有効性は,標準のICDPMに対する改良と,既存の手法と比較して知覚品質および競争歪指標に対する最先端性能によって実証される。
関連論文リスト
- DP-MDM: Detail-Preserving MR Reconstruction via Multiple Diffusion Models [7.601874398726257]
多重拡散モデルを用いた包括的詳細保存再構成法を提案する。
このフレームワークは多スケールのサンプルデータを効果的に表現し、逆ピラミッドアーキテクチャの幅を数える。
提案手法は,臨床および公開データセットのコンダクト実験により評価された。
論文 参考訳(メタデータ) (2024-05-09T13:37:18Z) - Mitigating Data Consistency Induced Discrepancy in Cascaded Diffusion Models for Sparse-view CT Reconstruction [4.227116189483428]
本研究は, 離散性緩和フレームワークを用いた新規なカスケード拡散について紹介する。
潜在空間の低画質画像生成と画素空間の高画質画像生成を含む。
これは、いくつかの推論ステップをピクセル空間から潜在空間に移すことによって計算コストを最小化する。
論文 参考訳(メタデータ) (2024-03-14T12:58:28Z) - Gradpaint: Gradient-Guided Inpainting with Diffusion Models [71.47496445507862]
Denoising Diffusion Probabilistic Models (DDPM) は近年,条件付きおよび非条件付き画像生成において顕著な成果を上げている。
我々はGradPaintを紹介し、グローバルな一貫性のあるイメージに向けて世代を操る。
我々は、様々なデータセットで訓練された拡散モデルによく適応し、現在最先端の教師付きおよび教師なしの手法を改善している。
論文 参考訳(メタデータ) (2023-09-18T09:36:24Z) - ExposureDiffusion: Learning to Expose for Low-light Image Enhancement [87.08496758469835]
この研究は、拡散モデルと物理ベースの露光モデルとをシームレスに統合することで、この問題に対処する。
提案手法は,バニラ拡散モデルと比較して性能が大幅に向上し,推論時間を短縮する。
提案するフレームワークは、実際のペア付きデータセット、SOTAノイズモデル、および異なるバックボーンネットワークの両方で動作する。
論文 参考訳(メタデータ) (2023-07-15T04:48:35Z) - Hierarchical Integration Diffusion Model for Realistic Image Deblurring [71.76410266003917]
拡散モデル (DM) は画像劣化に導入され, 有望な性能を示した。
本稿では,階層型統合拡散モデル(HI-Diff)を提案する。
人工的および実世界のぼかしデータセットの実験は、HI-Diffが最先端の手法より優れていることを示した。
論文 参考訳(メタデータ) (2023-05-22T12:18:20Z) - Generative Diffusion Prior for Unified Image Restoration and Enhancement [62.76390152617949]
既存の画像復元法は、主に自然画像の後方分布を利用する。
教師なしサンプリング方式で後部分布を効果的にモデル化するための生成拡散優先(GDP)を提案する。
GDPは、線形逆問題、非線形問題、ブラインド問題を解くために、プレトレインデノナイジング拡散生成モデル(DDPM)を利用する。
論文 参考訳(メタデータ) (2023-04-03T16:52:43Z) - Masked Images Are Counterfactual Samples for Robust Fine-tuning [77.82348472169335]
微調整の深層学習モデルは、分布内(ID)性能と分布外(OOD)堅牢性の間のトレードオフにつながる可能性がある。
そこで本研究では,マスク付き画像を対物サンプルとして用いて,ファインチューニングモデルのロバスト性を向上させる新しいファインチューニング手法を提案する。
論文 参考訳(メタデータ) (2023-03-06T11:51:28Z) - Deep Learning-Based Defect Classification and Detection in SEM Images [1.9206693386750882]
特に、異なるResNet、VGGNetアーキテクチャをバックボーンとして使用するRetinaNetモデルをトレーニングする。
そこで本研究では,異なるモデルからの出力予測を組み合わせることで,欠陥の分類と検出に優れた性能を実現するための選好に基づくアンサンブル戦略を提案する。
論文 参考訳(メタデータ) (2022-06-20T16:34:11Z) - Denoising Diffusion Restoration Models [110.1244240726802]
Denoising Diffusion Restoration Models (DDRM) は効率的で教師なしの後方サンプリング手法である。
DDRMの汎用性を、超高解像度、デブロアリング、インペイント、カラー化のためにいくつかの画像データセットに示す。
論文 参考訳(メタデータ) (2022-01-27T20:19:07Z) - Score-based diffusion models for accelerated MRI [35.3148116010546]
本研究では,画像中の逆問題を容易に解けるような条件分布からデータをサンプリングする方法を提案する。
我々のモデルは、訓練のためにのみ等級画像を必要とするが、複雑な値のデータを再構成することができ、さらに並列画像まで拡張できる。
論文 参考訳(メタデータ) (2021-10-08T08:42:03Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。