論文の概要: BaMBNet: A Blur-aware Multi-branch Network for Defocus Deblurring
- arxiv url: http://arxiv.org/abs/2105.14766v1
- Date: Mon, 31 May 2021 07:55:30 GMT
- ステータス: 処理完了
- システム内更新日: 2021-06-01 16:57:38.603103
- Title: BaMBNet: A Blur-aware Multi-branch Network for Defocus Deblurring
- Title(参考訳): BaMBNet:デフォーカス・デブロアリングのためのBlur-aware Multi-branch Network
- Authors: Pengwei Liang, Junjun Jiang, Xianming Liu, and Jiayi Ma
- Abstract要約: 畳み込みニューラルネットワーク(CNN)は、デフォーカス劣化問題に導入され、大きな進歩を遂げた。
本研究では,異なる領域(ブラー量が異なる)を区別して扱う新しいマルチブランチネットワーク(BaMBNet)を設計する。
定量的および定性的な実験は、BaMBNetが最先端の手法より優れていることを示している。
- 参考スコア(独自算出の注目度): 74.34263243089688
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: The defocus deblurring raised from the finite aperture size and exposure time
is an essential problem in the computational photography. It is very
challenging because the blur kernel is spatially varying and difficult to
estimate by traditional methods. Due to its great breakthrough in low-level
tasks, convolutional neural networks (CNNs) have been introduced to the defocus
deblurring problem and achieved significant progress. However, they apply the
same kernel for different regions of the defocus blurred images, thus it is
difficult to handle these nonuniform blurred images. To this end, this study
designs a novel blur-aware multi-branch network (BaMBNet), in which different
regions (with different blur amounts) should be treated differentially. In
particular, we estimate the blur amounts of different regions by the internal
geometric constraint of the DP data, which measures the defocus disparity
between the left and right views. Based on the assumption that different image
regions with different blur amounts have different deblurring difficulties, we
leverage different networks with different capacities (\emph{i.e.} parameters)
to process different image regions. Moreover, we introduce a meta-learning
defocus mask generation algorithm to assign each pixel to a proper branch. In
this way, we can expect to well maintain the information of the clear regions
while recovering the missing details of the blurred regions. Both quantitative
and qualitative experiments demonstrate that our BaMBNet outperforms the
state-of-the-art methods. Source code will be available at
https://github.com/junjun-jiang/BaMBNet.
- Abstract(参考訳): 有限開口サイズと露光時間から生じるデフォーカスの劣化は、計算写真において重要な問題である。
ぼやけたカーネルは空間的に変化しており、従来の手法では推定が難しいため、非常に難しい。
低レベルタスクにおける大きなブレークスルーのため、畳み込みニューラルネットワーク(cnns)がデフォーカスデブラリング問題に導入され、著しい進歩を達成した。
しかし、デフォーカスぼかし画像の異なる領域に同じカーネルを適用するため、これらの不均一なぼかし画像を扱うことは困難である。
そこで本研究では,異なる領域(ぼやき量が異なる)を別々に扱うことができる,新しいぼやけ対応マルチブランチネットワーク(bambnet)を設計した。
特に、左右の視点の偏差を測定するdpデータの内部幾何学的制約により異なる領域のぼやけ量を推定する。
ブラー量が異なる異なる画像領域が異なる難易度が異なるという仮定に基づいて、異なる容量を持つ異なるネットワークを利用する(\emph{i.e.)。
パラメータ) 異なる画像領域を処理する。
さらに,各画素を適切なブランチに割り当てるメタラーニングデフォーカスマスク生成アルゴリズムを導入する。
このようにして、ぼやけた領域の欠落した詳細を回復しながら、明瞭な領域の情報を適切に維持することが期待できる。
定量的および定性的な実験は、BaMBNetが最先端の手法より優れていることを示している。
ソースコードはhttps://github.com/junjun-jiang/BaMBNetで入手できる。
関連論文リスト
- Multi-spectral Class Center Network for Face Manipulation Detection and Localization [52.569170436393165]
顔の操作検出と局所化のための新しいマルチスペクトル・クラス・センター・ネットワーク(MSCCNet)を提案する。
周波数帯域の異なる特徴に基づき、MSCCモジュールはマルチスペクトルクラスセンターを収集し、ピクセル対クラス関係を計算する。
多スペクトルクラスレベルの表現を適用することで、偽画像の操作された領域に敏感な視覚概念の意味情報を抑えることができる。
論文 参考訳(メタデータ) (2023-05-18T08:09:20Z) - Redesigning Multi-Scale Neural Network for Crowd Counting [68.674652984003]
本稿では, 集団カウントのための多スケール密度マップを階層的にマージする, 密度専門家の階層的混合を導入する。
階層構造の中では、すべてのスケールからの貢献を促進するために、専門家の競争とコラボレーションのスキームが提示されます。
実験の結果,提案手法は5つの公開データセット上での最先端性能を実現することがわかった。
論文 参考訳(メタデータ) (2022-08-04T21:49:29Z) - Learning Depth from Focus in the Wild [16.27391171541217]
単一焦点スタックからの畳み込みニューラルネットワークによる深度推定を提案する。
本手法では,画像アライメントにおいても,奥行きマップをエンドツーエンドで推定することができる。
提案するネットワークの一般化のために,商用カメラの特徴を現実的に再現するシミュレータを開発した。
論文 参考訳(メタデータ) (2022-07-20T05:23:29Z) - Single image deep defocus estimation and its applications [82.93345261434943]
画像パッチを20レベルの曖昧さの1つに分類するために、ディープニューラルネットワークをトレーニングします。
トレーニングされたモデルは、反復重み付きガイドフィルタを適用して改善するパッチのぼかしを決定するために使用される。
その結果、デフォーカスマップは各ピクセルのぼやけた度合いの情報を運ぶ。
論文 参考訳(メタデータ) (2021-07-30T06:18:16Z) - An Empirical Method to Quantify the Peripheral Performance Degradation
in Deep Networks [18.808132632482103]
畳み込みニューラルネットワーク(CNN)カーネルは、各畳み込み層に結合する。
より深いネットワークとストライドベースのダウンサンプリングを組み合わせることで、この領域の伝播は、画像の無視できない部分をカバーすることができる。
我々のデータセットは、高解像度の背景にオブジェクトを挿入することで構築され、画像境界に対してターゲットオブジェクトを特定の位置に配置するサブイメージを収穫することができる。
マスクR-CNNの動作を目標位置の選択にわたって探索することにより、画像境界付近、特に画像コーナーにおいて、パフォーマンス劣化の明確なパターンが明らかになる。
論文 参考訳(メタデータ) (2020-12-04T18:00:47Z) - Defocus Blur Detection via Depth Distillation [64.78779830554731]
初めてDBDに深度情報を導入します。
より詳しくは, 地底の真理と, 十分に訓練された深度推定ネットワークから抽出した深度から, デフォーカスのぼかしを学習する。
我々の手法は、2つの一般的なデータセット上で11の最先端の手法より優れています。
論文 参考訳(メタデータ) (2020-07-16T04:58:09Z) - Image Fine-grained Inpainting [89.17316318927621]
拡張畳み込みの密結合を利用してより大きく効果的な受容場を得る一段階モデルを提案する。
この効率的なジェネレータをよく訓練するために、頻繁に使用されるVGG特徴整合損失を除いて、新しい自己誘導回帰損失を設計する。
また、局所的・グローバルな分枝を持つ識別器を用いて、局所的・グローバルな内容の整合性を確保する。
論文 参考訳(メタデータ) (2020-02-07T03:45:25Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。