論文の概要: INFWIDE: Image and Feature Space Wiener Deconvolution Network for
Non-blind Image Deblurring in Low-Light Conditions
- arxiv url: http://arxiv.org/abs/2207.08201v1
- Date: Sun, 17 Jul 2022 15:22:31 GMT
- ステータス: 処理完了
- システム内更新日: 2022-07-19 18:13:01.913542
- Title: INFWIDE: Image and Feature Space Wiener Deconvolution Network for
Non-blind Image Deblurring in Low-Light Conditions
- Title(参考訳): INFWIDE:低光環境下での非盲点画像分解のための画像および特徴空間ウィナーデコンボリューションネットワーク
- Authors: Zhihong Zhang, Yuxiao Cheng, Jinli Suo, Liheng Bian, and Qionghai Dai
- Abstract要約: 画像と特徴空間Wener deconvolution Network (INFWIDE) と呼ばれる新しい非盲点分解法を提案する。
INFWIDEは、画像空間におけるノイズを除去し、飽和領域を幻覚し、特徴空間におけるリングアーティファクトを抑制する。
合成データと実データを用いた実験は,提案手法の優れた性能を示す。
- 参考スコア(独自算出の注目度): 32.35378513394865
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: Under low-light environment, handheld photography suffers from severe camera
shake under long exposure settings. Although existing deblurring algorithms
have shown promising performance on well-exposed blurry images, they still
cannot cope with low-light snapshots. Sophisticated noise and saturation
regions are two dominating challenges in practical low-light deblurring. In
this work, we propose a novel non-blind deblurring method dubbed image and
feature space Wiener deconvolution network (INFWIDE) to tackle these problems
systematically. In terms of algorithm design, INFWIDE proposes a two-branch
architecture, which explicitly removes noise and hallucinates saturated regions
in the image space and suppresses ringing artifacts in the feature space, and
integrates the two complementary outputs with a subtle multi-scale fusion
network for high quality night photograph deblurring. For effective network
training, we design a set of loss functions integrating a forward imaging model
and backward reconstruction to form a close-loop regularization to secure good
convergence of the deep neural network. Further, to optimize INFWIDE's
applicability in real low-light conditions, a physical-process-based low-light
noise model is employed to synthesize realistic noisy night photographs for
model training. Taking advantage of the traditional Wiener deconvolution
algorithm's physically driven characteristics and arisen deep neural network's
representation ability, INFWIDE can recover fine details while suppressing the
unpleasant artifacts during deblurring. Extensive experiments on synthetic data
and real data demonstrate the superior performance of the proposed approach.
- Abstract(参考訳): 低照度環境では、ハンドヘルド写真は長時間露光環境で激しいカメラの揺れに悩まされる。
既存のデブラリングアルゴリズムは、露呈したぼやけた画像で有望な性能を示しているが、低照度スナップショットには対処できない。
洗練されたノイズと飽和領域は、実用的な低光度デブラリングにおいて2つの大きな課題である。
本研究では,これらの問題に体系的に対処するために,画像空間と特徴空間(INFWIDE)と呼ばれる新しい非盲点分解法を提案する。
アルゴリズム設計においてINFWIDEは、画像空間の雑音を明示的に除去し、画像空間の飽和領域を幻覚させ、特徴空間のリングアーティファクトを抑制し、2つの相補的出力を微妙なマルチスケール融合ネットワークと統合し、高品質な夜間写真撮影を可能にする2分岐アーキテクチャを提案する。
効果的なネットワークトレーニングのために,前方イメージングモデルと後方再構成を統合した損失関数セットを設計し,ディープニューラルネットワークの収束性を確保するためにクローズループ正則化を行う。
さらに、実低照度条件におけるinfwideの応用性を最適化するために、実プロセスに基づく低照度ノイズモデルを用いて、モデルトレーニングのための現実的なノイズ写真を合成する。
従来のWienerデコンボリューションアルゴリズムの物理的に駆動された特性を活用し、ディープニューラルネットワークの表現能力を生かしたINFWIDEは、劣化中の不快なアーティファクトを抑えながら詳細を回復することができる。
合成データと実データに関する広範な実験は,提案手法の優れた性能を示す。
関連論文リスト
- LDM-ISP: Enhancing Neural ISP for Low Light with Latent Diffusion Models [54.93010869546011]
本稿では,事前学習した潜伏拡散モデルを用いて,超低照度画像の高精細化のためのニューラルISPを実現することを提案する。
具体的には、RAWドメイン上で動作するために事前訓練された潜在拡散モデルを調整するために、軽量なテーミングモジュールのセットをトレーニングする。
遅延拡散モデルにおけるUNet復調と復号化の異なる役割を観察し、低照度画像強調タスクを遅延空間低周波コンテンツ生成と復号位相高周波ディテール保守に分解するきっかけとなる。
論文 参考訳(メタデータ) (2023-12-02T04:31:51Z) - SCRNet: a Retinex Structure-based Low-light Enhancement Model Guided by
Spatial Consistency [22.54951703413469]
本稿では,SCRNet(Spatial Consistency Retinex Network)と呼ばれる,新しい低照度画像強調モデルを提案する。
提案モデルでは, 空間的整合性の原理に着想を得て, チャネルレベル, セマンティックレベル, テクスチャレベルという3つのレベルの整合性を考慮した。
様々な低照度画像データセットに対する広範囲な評価は、提案したSCRNetが既存の最先端手法より優れていることを示している。
論文 参考訳(メタデータ) (2023-05-14T03:32:19Z) - Lightweight HDR Camera ISP for Robust Perception in Dynamic Illumination
Conditions via Fourier Adversarial Networks [35.532434169432776]
照明とノイズ除去の逐次的バランスをとる軽量な2段階画像強調アルゴリズムを提案する。
また、異なる照明条件下での一貫した画像強調のためのフーリエスペクトルベース対向フレームワーク(AFNet)を提案する。
また,定量的および定性的な評価に基づいて,画像強調技術が共通認識タスクの性能に与える影響について検討した。
論文 参考訳(メタデータ) (2022-04-04T18:48:51Z) - Practical Blind Image Denoising via Swin-Conv-UNet and Data Synthesis [148.16279746287452]
本研究では,残差畳み込み層の局所モデリング能力とスウィントランスブロックの非局所モデリング能力を組み込むスウィンコンブブロックを提案する。
トレーニングデータ合成のために,異なる種類のノイズを考慮した実用的なノイズ劣化モデルの設計を行う。
AGWN除去と実画像復号化の実験は、新しいネットワークアーキテクチャ設計が最先端の性能を達成することを実証している。
論文 参考訳(メタデータ) (2022-03-24T18:11:31Z) - Invertible Network for Unpaired Low-light Image Enhancement [78.33382003460903]
本稿では,非可逆的ネットワークを活用して,前処理における低照度画像の強化と,非対向学習により逆向きに通常の照度画像の劣化を図ることを提案する。
対向的損失に加えて、トレーニングの安定性を確保し、より詳細な画像を保存するために、様々な損失関数を設計する。
低照度画像に対するプログレッシブ自己誘導強調処理を提案し,SOTAに対して良好な性能を示す。
論文 参考訳(メタデータ) (2021-12-24T17:00:54Z) - Physics-based Noise Modeling for Extreme Low-light Photography [63.65570751728917]
CMOS光センサの撮像パイプラインにおけるノイズ統計について検討する。
実雑音構造を正確に特徴付けることのできる包括的ノイズモデルを定式化する。
我々のノイズモデルは、学習に基づく低照度復調アルゴリズムのためのリアルなトレーニングデータを合成するのに利用できる。
論文 参考訳(メタデータ) (2021-08-04T16:36:29Z) - Deep Bilateral Retinex for Low-Light Image Enhancement [96.15991198417552]
低照度画像は、低コントラスト、色歪み、測定ノイズによる視界の低下に悩まされる。
本稿では,低照度画像強調のための深層学習手法を提案する。
提案手法は最先端の手法と非常に競合し, 極めて低照度で撮影した画像の処理において, 他に比べて大きな優位性を有する。
論文 参考訳(メタデータ) (2020-07-04T06:26:44Z) - Unsupervised Low-light Image Enhancement with Decoupled Networks [103.74355338972123]
我々は、実世界の低照度画像を教師なしで拡張する2段階のGANベースのフレームワークを学習する。
提案手法は,照度向上と雑音低減の両面から,最先端の教師なし画像強調法より優れる。
論文 参考訳(メタデータ) (2020-05-06T13:37:08Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。