論文の概要: Defocus Deblurring Using Dual-Pixel Data
- arxiv url: http://arxiv.org/abs/2005.00305v3
- Date: Thu, 16 Jul 2020 23:49:50 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-08 00:21:52.403267
- Title: Defocus Deblurring Using Dual-Pixel Data
- Title(参考訳): デュアルピクセルデータを用いたデフォーカスデブラリング
- Authors: Abdullah Abuolaim and Michael S. Brown
- Abstract要約: デフォーカスのぼかしは、広い開口部の使用により被写界深度が浅い画像に現れる。
最新のカメラで検出されるデュアルピクセル(DP)センサで利用可能なデータを活用する,効果的なデフォーカスデブロリング手法を提案する。
- 参考スコア(独自算出の注目度): 41.201653787083735
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Defocus blur arises in images that are captured with a shallow depth of field
due to the use of a wide aperture. Correcting defocus blur is challenging
because the blur is spatially varying and difficult to estimate. We propose an
effective defocus deblurring method that exploits data available on dual-pixel
(DP) sensors found on most modern cameras. DP sensors are used to assist a
camera's auto-focus by capturing two sub-aperture views of the scene in a
single image shot. The two sub-aperture images are used to calculate the
appropriate lens position to focus on a particular scene region and are
discarded afterwards. We introduce a deep neural network (DNN) architecture
that uses these discarded sub-aperture images to reduce defocus blur. A key
contribution of our effort is a carefully captured dataset of 500 scenes (2000
images) where each scene has: (i) an image with defocus blur captured at a
large aperture; (ii) the two associated DP sub-aperture views; and (iii) the
corresponding all-in-focus image captured with a small aperture. Our proposed
DNN produces results that are significantly better than conventional single
image methods in terms of both quantitative and perceptual metrics -- all from
data that is already available on the camera but ignored. The dataset, code,
and trained models are available at
https://github.com/Abdullah-Abuolaim/defocus-deblurring-dual-pixel.
- Abstract(参考訳): デフォーカスのぼやけは、広い開口部を使用することで、浅い視野の深さで撮影される画像に現れる。
ぼかしが空間的に変化し、推定が困難であるため、デフォーカスのぼかしの修正は困難である。
最新のカメラで検出されるデュアルピクセル(DP)センサで利用可能なデータを活用する,効果的なデフォーカスデブロリング手法を提案する。
dpセンサーは、1枚の写真でシーンの2つのサブアパーチャービューを撮影することで、カメラのオートフォーカスを支援する。
2つのサブアパーチャ画像を用いて、特定のシーン領域にフォーカスする適切なレンズ位置を算出し、その後廃棄する。
我々は,これら捨てられたサブアパーチャ画像を用いてデフォーカスのぼかしを低減するディープニューラルネットワーク(DNN)アーキテクチャを導入する。
私たちの取り組みの重要な貢献は、500のシーン(2000の画像)を注意深く捉えたデータセットである。
(i)大開口部で捉えたデフォーカスぼけの画像
(ii)関連する2つのDPサブアパーチャビュー、及び
三 小さい開口部で撮影した対応するオールインフォーカス画像。
提案したDNNは、カメラで既に利用可能だが無視されているデータから、定量的および知覚的メトリクスの両方の観点から、従来の単一画像手法よりもはるかに優れた結果を生成する。
データセット、コード、トレーニングされたモデルはhttps://github.com/Abdullah-Abuolaim/defocus-deblurring-dual-ピクセルで入手できる。
関連論文リスト
- Towards Real-World Focus Stacking with Deep Learning [97.34754533628322]
焦点ブラケットを用いた94個の高解像度原画像のバーストからなる新しいデータセットを提案する。
このデータセットは、現実世界のアプリケーションに十分な長さのバーストを処理できるフォーカススタックのための最初のディープラーニングアルゴリズムをトレーニングするために使用される。
論文 参考訳(メタデータ) (2023-11-29T17:49:33Z) - Camera-Independent Single Image Depth Estimation from Defocus Blur [6.516967182213821]
光物理方程式を用いて、複数のカメラ関連パラメータがデフォーカスのぼかしにどのように影響するかを示す。
我々は、デフォーカスブラーモデルから奥行きのカメラ独立性能をテストするために、合成データセットを作成する。
論文 参考訳(メタデータ) (2023-11-21T23:14:42Z) - Learning Depth from Focus in the Wild [16.27391171541217]
単一焦点スタックからの畳み込みニューラルネットワークによる深度推定を提案する。
本手法では,画像アライメントにおいても,奥行きマップをエンドツーエンドで推定することができる。
提案するネットワークの一般化のために,商用カメラの特徴を現実的に再現するシミュレータを開発した。
論文 参考訳(メタデータ) (2022-07-20T05:23:29Z) - Learning to Deblur using Light Field Generated and Real Defocus Images [4.926805108788465]
デフォーカス・デブロワーリングは、デフォーカス・ボケの性質が空間的に変化するため、困難な作業である。
本稿では,光の強度を活用し,光源の欠点を克服する新しいディープデフォーカス・デブロアリング・ネットワークを提案する。
論文 参考訳(メタデータ) (2022-04-01T11:35:51Z) - Defocus Map Estimation and Deblurring from a Single Dual-Pixel Image [54.10957300181677]
本稿では,1枚のデュアルピクセルイメージを入力として,画像のデフォーカスマップを同時に推定する手法を提案する。
本手法は,デフォーカスマップ推定とぼかし除去の両方において,教師なしでも事前作業を改善する。
論文 参考訳(メタデータ) (2021-10-12T00:09:07Z) - Improving Single-Image Defocus Deblurring: How Dual-Pixel Images Help
Through Multi-Task Learning [48.063176079878055]
本稿では,2つのサブアパーチャビューをマルチタスクフレームワークに組み込んだシングルイメージデブロアリングネットワークを提案する。
実験により, このマルチタスク戦略は, 最先端デフォーカスデブロリング法よりも+1dBPSNRの改善を達成できることが示された。
これらの高品質DPビューは、リフレクション除去など、他のDPベースのアプリケーションに使用することができる。
論文 参考訳(メタデータ) (2021-08-11T14:45:15Z) - Single image deep defocus estimation and its applications [82.93345261434943]
画像パッチを20レベルの曖昧さの1つに分類するために、ディープニューラルネットワークをトレーニングします。
トレーニングされたモデルは、反復重み付きガイドフィルタを適用して改善するパッチのぼかしを決定するために使用される。
その結果、デフォーカスマップは各ピクセルのぼやけた度合いの情報を運ぶ。
論文 参考訳(メタデータ) (2021-07-30T06:18:16Z) - Defocus Blur Detection via Depth Distillation [64.78779830554731]
初めてDBDに深度情報を導入します。
より詳しくは, 地底の真理と, 十分に訓練された深度推定ネットワークから抽出した深度から, デフォーカスのぼかしを学習する。
我々の手法は、2つの一般的なデータセット上で11の最先端の手法より優れています。
論文 参考訳(メタデータ) (2020-07-16T04:58:09Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。