論文の概要: Learning to Erase the Bayer-Filter to See in the Dark
- arxiv url: http://arxiv.org/abs/2203.04042v1
- Date: Tue, 8 Mar 2022 12:22:31 GMT
- ステータス: 処理完了
- システム内更新日: 2022-03-09 19:21:17.705543
- Title: Learning to Erase the Bayer-Filter to See in the Dark
- Title(参考訳): 暗闇で見るためにバイエルフィルターを消す方法を学ぶ
- Authors: Xingbo Dong, Wanyan Xu, Zhihui Miao, Lan Ma, Chao Zhang, Jiewen Yang,
Zhe Jin, Andrew Beng Jin Teoh, Jiajun Shen
- Abstract要約: 低照度画像強調は、低照度環境で撮影された画像の可視性を高める上で中心的な役割を果たす。
まず、ディープニューラルネットワークに基づくDe-Bayer-Filterシミュレータを提案し、色付き生画像からモノクロ生画像を生成する。
次に,色付き生データを合成したモノクローム生データを融合することにより,低照度画像強調を実現するために,完全畳み込みネットワークを提案する。
- 参考スコア(独自算出の注目度): 16.799967790243578
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Low-light image enhancement - a pervasive but challenging problem, plays a
central role in enhancing the visibility of an image captured in a poor
illumination environment. Due to the fact that not all photons can pass the
Bayer-Filter on the sensor of the color camera, in this work, we first present
a De-Bayer-Filter simulator based on deep neural networks to generate a
monochrome raw image from the colored raw image. Next, a fully convolutional
network is proposed to achieve the low-light image enhancement by fusing
colored raw data with synthesized monochrome raw data. Channel-wise attention
is also introduced to the fusion process to establish a complementary
interaction between features from colored and monochrome raw images. To train
the convolutional networks, we propose a dataset with monochrome and color raw
pairs named Mono-Colored Raw paired dataset (MCR) collected by using a
monochrome camera without Bayer-Filter and a color camera with Bayer-Filter.
The proposed pipeline take advantages of the fusion of the virtual monochrome
and the color raw images and our extensive experiments indicate that
significant improvement can be achieved by leveraging raw sensor data and
data-driven learning.
- Abstract(参考訳): 低照度画像の強調 - 広範だが困難な問題であり、照明環境の悪い環境で撮影された画像の可視性を高める上で中心的な役割を果たす。
カラーカメラのセンサ上で全ての光子がバイアフィルタを通過できるわけではないため,本研究ではまず,ディープニューラルネットワークに基づくデバイアフィルタシミュレータを提案し,カラーraw画像からモノクロ生画像を生成する。
次に,色付き生データと合成モノクロ生データを融合して低光度画像強調を実現するために,完全畳み込みネットワークを提案する。
カラー画像とモノクロ画像からの特徴間の相補的な相互作用を確立するため、チャンネル毎の注意が融合プロセスに導入された。
畳み込みネットワークを訓練するために,バイエルフィルタのないモノクロカメラとバイエルフィルタ付きカラーカメラを用いて収集した,モノクロとカラー生ペアのデータセットであるモノカラー生ペアデータセット(mcr)を提案する。
提案するパイプラインは,仮想モノクロームとカラーraw画像の融合の利点を活かし,センサデータとデータ駆動学習の活用により,大幅な改善が達成できることを示す。
関連論文リスト
- Retinex-RAWMamba: Bridging Demosaicing and Denoising for Low-Light RAW Image Enhancement [71.13353154514418]
低照度画像の強化、特に生ドメインからsRGBドメインへのマッピングのようなクロスドメインタスクは、依然として大きな課題である。
RAWMambaと呼ばれる新しいMambaスキャニング機構を提案する。
また,Retinex の先行したRetinex Decomposition Module (RDM) も提案する。
論文 参考訳(メタデータ) (2024-09-11T06:12:03Z) - A Learnable Color Correction Matrix for RAW Reconstruction [19.394856071610604]
複雑な逆画像信号処理装置(ISP)を近似する学習可能な色補正行列(CCM)を導入する。
実験結果から,本手法で生成したRAW(simRAW)画像は,より複雑な逆ISP法で生成した画像と同等の性能向上が得られた。
論文 参考訳(メタデータ) (2024-09-04T07:46:42Z) - Rawformer: Unpaired Raw-to-Raw Translation for Learnable Camera ISPs [53.68932498994655]
本稿では,多種多様なカメラを用いた生と生の翻訳の未ペアリング学習手法を提案する。
特定のカメラが捉えた生画像をターゲットカメラに正確にマッピングし、学習可能なISPを新しい目に見えないカメラに一般化する。
提案手法は,従来の最先端技術と比較して精度が高く,実際のカメラデータセットに優れた性能を示す。
論文 参考訳(メタデータ) (2024-04-16T16:17:48Z) - NIR-Assisted Image Denoising: A Selective Fusion Approach and A Real-World Benchmark Dataset [53.79524776100983]
近赤外(NIR)画像を活用して、視認可能なRGB画像の復調を支援することで、この問題に対処する可能性を示している。
既存の作品では、NIR情報を効果的に活用して現実のイメージを飾ることに苦戦している。
先進デノナイジングネットワークにプラグイン・アンド・プレイ可能な効率的な選択核融合モジュール(SFM)を提案する。
論文 参考訳(メタデータ) (2024-04-12T14:54:26Z) - Enhancing Low-Light Images Using Infrared-Encoded Images [81.8710581927427]
従来の芸術は、主にピクセルワイド・ロスを用いて可視光スペクトルで捉えた低照度画像に焦点を当てていた。
我々は,赤外線カットオフフィルタを除去することにより,低照度環境下で撮影された画像の可視性を高める新しい手法を提案する。
論文 参考訳(メタデータ) (2023-07-09T08:29:19Z) - Reversed Image Signal Processing and RAW Reconstruction. AIM 2022
Challenge Report [109.2135194765743]
本稿では,AIM 2022 Challenge on Reversed Image Signal Processing and RAW Reconstructionを紹介する。
我々は,メタデータを使わずにRGBから生のセンサイメージを回収し,ISP変換を「逆」することを目的としている。
論文 参考訳(メタデータ) (2022-10-20T10:43:53Z) - Polarized Color Image Denoising using Pocoformer [42.171036556122644]
偏光カラー写真は、視覚的なテクスチャと1枚のスナップショットで対象のサージカル情報の両方を提供する。
指向性偏光フィルタアレイを用いることで、従来のカラー画像に比べて光子数とSNRが極めて低い。
クリーンな信号と正確な分極情報を同時に復元する学習に基づく手法を提案する。
論文 参考訳(メタデータ) (2022-07-01T05:52:14Z) - Transform your Smartphone into a DSLR Camera: Learning the ISP in the
Wild [159.71025525493354]
本稿では,スマートフォンが取得したRAW画像に基づいて,DSLRの品質画像を生成する訓練可能な画像信号処理フレームワークを提案する。
トレーニング画像ペア間の色ずれに対処するために、カラー条件ISPネットワークを使用し、各入力RAWと基準DSLR画像間の新しいパラメトリック色マッピングを最適化する。
論文 参考訳(メタデータ) (2022-03-20T20:13:59Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。