論文の概要: Single-Image HDR Reconstruction by Learning to Reverse the Camera
Pipeline
- arxiv url: http://arxiv.org/abs/2004.01179v1
- Date: Thu, 2 Apr 2020 17:59:04 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-17 13:14:53.624373
- Title: Single-Image HDR Reconstruction by Learning to Reverse the Camera
Pipeline
- Title(参考訳): カメラパイプライン反転学習による単一画像hdr再構成
- Authors: Yu-Lun Liu, Wei-Sheng Lai, Yu-Sheng Chen, Yi-Lung Kao, Ming-Hsuan
Yang, Yung-Yu Chuang, and Jia-Bin Huang
- Abstract要約: 本稿では,LDR画像形成パイプラインの領域知識をモデルに組み込むことを提案する。
我々は,HDRto-LDR画像形成パイプラインを(1)ダイナミックレンジクリッピング,(2)カメラ応答関数からの非線形マッピング,(3)量子化としてモデル化する。
提案手法は,最先端の単一画像HDR再構成アルゴリズムに対して良好に動作することを示す。
- 参考スコア(独自算出の注目度): 100.5353614588565
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Recovering a high dynamic range (HDR) image from a single low dynamic range
(LDR) input image is challenging due to missing details in under-/over-exposed
regions caused by quantization and saturation of camera sensors. In contrast to
existing learning-based methods, our core idea is to incorporate the domain
knowledge of the LDR image formation pipeline into our model. We model the
HDRto-LDR image formation pipeline as the (1) dynamic range clipping, (2)
non-linear mapping from a camera response function, and (3) quantization. We
then propose to learn three specialized CNNs to reverse these steps. By
decomposing the problem into specific sub-tasks, we impose effective physical
constraints to facilitate the training of individual sub-networks. Finally, we
jointly fine-tune the entire model end-to-end to reduce error accumulation.
With extensive quantitative and qualitative experiments on diverse image
datasets, we demonstrate that the proposed method performs favorably against
state-of-the-art single-image HDR reconstruction algorithms.
- Abstract(参考訳): 単一低ダイナミックレンジ(ldr)入力画像からのハイダイナミックレンジ(hdr)画像の復元は、カメラセンサの量子化と飽和による露出不足領域の詳細の欠如により困難である。
既存の学習ベースの手法とは対照的に、LDR画像形成パイプラインのドメイン知識をモデルに組み込むことが中心的な考え方です。
我々は,HDRto-LDR画像形成パイプラインを(1)ダイナミックレンジクリッピング,(2)カメラ応答関数からの非線形マッピング,(3)量子化としてモデル化する。
次に、これらのステップを逆転する3つの専門CNNを学ぶことを提案する。
問題を特定のサブタスクに分解することで、個々のサブネットワークのトレーニングを容易にする効果的な物理的制約を課す。
最後に、モデル全体をエンドツーエンドで微調整し、エラーの蓄積を減らす。
多様な画像データセットの定量的および定性的な実験により,提案手法が最先端の単一画像HDR再構成アルゴリズムに対して良好に動作することを示す。
関連論文リスト
- Generating Content for HDR Deghosting from Frequency View [56.103761824603644]
近年の拡散モデル (DM) はHDRイメージング分野に導入されている。
DMは画像全体を推定するために大きなモデルで広範囲の反復を必要とする。
ゴーストフリーHDRイメージングのための低周波数対応拡散(LF-Diff)モデルを提案する。
論文 参考訳(メタデータ) (2024-04-01T01:32:11Z) - Towards High-quality HDR Deghosting with Conditional Diffusion Models [88.83729417524823]
高ダイナミックレンジ(LDR)画像は、既存のディープニューラルネットワーク(DNN)技術により、複数の低ダイナミックレンジ(LDR)画像から復元することができる。
DNNは、LDR画像が飽和度と大きな動きを持つ場合、ゴーストアーティファクトを生成する。
拡散モデルの条件としてLDR特徴を利用する画像生成としてHDRデゴースト問題を定式化する。
論文 参考訳(メタデータ) (2023-11-02T01:53:55Z) - Self-Supervised High Dynamic Range Imaging with Multi-Exposure Images in
Dynamic Scenes [58.66427721308464]
Selfは、訓練中にダイナミックなマルチ露光画像のみを必要とする自己教師型再構成手法である。
Selfは最先端の自己管理手法に対して優れた結果を出し、教師付き手法に匹敵するパフォーマンスを実現している。
論文 参考訳(メタデータ) (2023-10-03T07:10:49Z) - Single Image LDR to HDR Conversion using Conditional Diffusion [18.466814193413487]
デジタル画像は現実的なシーンを再現することを目的としているが、Low Dynamic Range(LDR)カメラは現実のシーンの広いダイナミックレンジを表現できない。
本稿では,影やハイライトから複雑な詳細を復元するための深層学習に基づくアプローチを提案する。
提案フレームワークにディープベースオートエンコーダを組み込んで,コンディショニングに使用するLDR画像の潜在表現の質を高める。
論文 参考訳(メタデータ) (2023-07-06T07:19:47Z) - SMAE: Few-shot Learning for HDR Deghosting with Saturation-Aware Masked
Autoencoders [97.64072440883392]
そこで本研究では,SSHDRと呼ばれる2段階の訓練を通した短距離HDRイメージングを実現するための,新しい半教師付きアプローチを提案する。
以前の方法とは異なり、コンテンツを直接回復し、ゴーストを同時に除去することは、最適に達成することが難しい。
実験により、SSHDRは異なるデータセットの内外における定量的かつ定性的に最先端の手法より優れていることが示された。
論文 参考訳(メタデータ) (2023-04-14T03:42:51Z) - Single-Image HDR Reconstruction by Multi-Exposure Generation [8.656080193351581]
本稿では,HDR再構成のための物理画像形成過程を逆転する弱教師付き学習手法を提案する。
我々のニューラルネットワークは、複数の露光を合成する前に画素照射を再構成するためにカメラ応答を反転させることができる。
実験の結果,提案手法はHDR画像の再構成を効果的に行うことができることがわかった。
論文 参考訳(メタデータ) (2022-10-28T05:12:56Z) - Rank-Enhanced Low-Dimensional Convolution Set for Hyperspectral Image
Denoising [50.039949798156826]
本稿では,ハイパースペクトル(HS)画像の難解化問題に対処する。
ランク付き低次元畳み込み集合(Re-ConvSet)を提案する。
次に、Re-ConvSetを広く使われているU-Netアーキテクチャに組み込んで、HS画像復号法を構築する。
論文 参考訳(メタデータ) (2022-07-09T13:35:12Z) - Unpaired Learning for High Dynamic Range Image Tone Mapping [3.867363075280544]
本稿では,低ダイナミックレンジ (LDR) の再生を目標とする新たなトーンマッピング手法について述べる。
このゴールは、無関係なHDRとLDR画像のセットに基づいた非対向的トレーニングの使用を可能にする。
論文 参考訳(メタデータ) (2021-10-30T09:58:55Z) - HDRUNet: Single Image HDR Reconstruction with Denoising and
Dequantization [39.82945546614887]
本研究では,空間動的エンコーダデコーダネットワークであるHDRUNetを用いて,単一画像HDR再構成のためのエンドツーエンドマッピングを学習する。
本手法は,定量的比較と視覚的品質において最先端の性能を実現する。
論文 参考訳(メタデータ) (2021-05-27T12:12:34Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。