論文の概要: Continuous Cost Aggregation for Dual-Pixel Disparity Extraction
- arxiv url: http://arxiv.org/abs/2306.07921v1
- Date: Tue, 13 Jun 2023 17:26:50 GMT
- ステータス: 処理完了
- システム内更新日: 2023-06-14 12:33:30.516937
- Title: Continuous Cost Aggregation for Dual-Pixel Disparity Extraction
- Title(参考訳): デュアルピクセル分散抽出のための連続コスト集約
- Authors: Sagi Monin, Sagi Katz and Georgios Evangelidis
- Abstract要約: 本稿では,Dual-Pixel (DP) 画像の連続的コスト集約手法を提案する。
提案アルゴリズムは、画像パスに沿ってパラボラ係数を集約し、コストのマッチングにパラボラを適合させる。
デジタル一眼レフカメラと電話カメラのDPデータを用いた実験により,提案手法がDP差分推定における最先端性能を実現することを示す。
- 参考スコア(独自算出の注目度): 3.1153758106426603
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Recent works have shown that depth information can be obtained from
Dual-Pixel (DP) sensors. A DP arrangement provides two views in a single shot,
thus resembling a stereo image pair with a tiny baseline. However, the
different point spread function (PSF) per view, as well as the small disparity
range, makes the use of typical stereo matching algorithms problematic. To
address the above shortcomings, we propose a Continuous Cost Aggregation (CCA)
scheme within a semi-global matching framework that is able to provide accurate
continuous disparities from DP images. The proposed algorithm fits parabolas to
matching costs and aggregates parabola coefficients along image paths. The
aggregation step is performed subject to a quadratic constraint that not only
enforces the disparity smoothness but also maintains the quadratic form of the
total costs. This gives rise to an inherently efficient disparity propagation
scheme with a pixel-wise minimization in closed-form. Furthermore, the
continuous form allows for a robust multi-scale aggregation that better
compensates for the varying PSF. Experiments on DP data from both DSLR and
phone cameras show that the proposed scheme attains state-of-the-art
performance in DP disparity estimation.
- Abstract(参考訳): 最近の研究では、Dual-Pixel(DP)センサーから深度情報が得られることが示されている。
dpアレンジメントは1つのショットで2つのビューを提供し、ステレオイメージペアと小さなベースラインに似ている。
しかし、ビューごとの異なる点拡散関数(psf)と小さな差範囲は、典型的なステレオマッチングアルゴリズムの使用を問題にしている。
上記の欠点に対処するため,我々は,dp画像からの正確な連続的差異を提示できる半グローバルマッチングフレームワークにおける連続コスト集約(cca)スキームを提案する。
提案手法はパラボラ係数のマッチングコストに適合し,画像パスに沿ってパラボラ係数を集約する。
集約ステップは、不均一な滑らかさを強制するだけでなく、総コストの二次形式も維持する二次的制約の下で実行される。
これにより、クローズド形式における画素単位の最小化を伴う本質的に効率的な異方性伝播スキームが生まれる。
さらに、連続形式は、様々なPSFをよりよく補償する堅牢なマルチスケールアグリゲーションを可能にする。
デジタル一眼レフカメラと電話カメラのDPデータを用いた実験により,提案手法がDP差分推定における最先端性能を実現することを示す。
関連論文リスト
- Passive Snapshot Coded Aperture Dual-Pixel RGB-D Imaging [27.147735356737552]
単発3Dセンシングは、顕微鏡、医用画像、手術ナビゲーション、自律運転など、多くの応用分野において有用である。
画像レンズに符号化開口とDPセンサを併用したCADS(Coded Aperture Dual-Pixel Sensing)を提案する。
その結果,全焦点推定(AIF)では$1.5dBPSNRが改善し,DPセンシングでは5-6%の深さ推定精度が向上した。
論文 参考訳(メタデータ) (2024-02-28T06:45:47Z) - Semi-Supervised Coupled Thin-Plate Spline Model for Rotation Correction
and Beyond [90.73035469104666]
制御点が限られている複数のTPSを、より柔軟で強力な変換に繰り返し結合するCoupledTPSを提案する。
注記コストを考慮に入れた半教師付き学習手法を開発し、ラベルのないデータを活用することにより、ワープ品質を向上させる。
実験は、回転補正のための既存の最先端解よりもCoupledTPSの優位性と普遍性を示す。
論文 参考訳(メタデータ) (2024-01-24T13:03:28Z) - Dual-scale Enhanced and Cross-generative Consistency Learning for
Semi-supervised Polyp Segmentation [52.06525450636897]
大腸癌の早期診断と治療において, 自動ポリープセグメンテーションが重要な役割を担っている。
既存の手法は、完全に教師されたトレーニングに大きく依存しており、大量のラベル付きデータと時間を要するピクセル単位のアノテーションを必要とする。
大腸内視鏡画像からの半教師付きポリープ(DEC-Seg)のための新しいDual-scale Enhanced and Cross-generative consistency learningフレームワークを提案する。
論文 参考訳(メタデータ) (2023-12-26T12:56:31Z) - Video Frame Interpolation with Many-to-many Splatting and Spatial
Selective Refinement [83.60486465697318]
本稿では,フレームを効率的に補間するM2Mスプレイティングフレームワークを提案する。
入力フレームペアごとに、M2Mは任意の数のフレーム間を補間する際の計算オーバーヘッドが極小である。
フレキシブルな空間選択リファインメント(Spatial Selective Refinement)コンポーネントを導入して,M2M++フレームワークを拡張した。
論文 参考訳(メタデータ) (2023-10-29T09:09:32Z) - Improving Misaligned Multi-modality Image Fusion with One-stage
Progressive Dense Registration [67.23451452670282]
多モード画像間の相違は、画像融合の課題を引き起こす。
マルチスケールプログレッシブ・センス・レジストレーション方式を提案する。
このスキームは、一段階最適化のみで粗大な登録を行う。
論文 参考訳(メタデータ) (2023-08-22T03:46:24Z) - Spatially Varying Exposure with 2-by-2 Multiplexing: Optimality and
Universality [15.525314212209564]
本研究では,空間変動露光リスク(SVE-Risk)と呼ばれる新たな概念を提案する。
多重化パターンが与えられた場合、入力/出力-参照信号-雑音比に基づく従来の最適度基準が欠陥となる可能性があることを示す。
本稿では,デザインの普遍性パターンを画像再構成アルゴリズムから切り離すことができる設計観察について報告する。
論文 参考訳(メタデータ) (2023-06-30T02:08:25Z) - Many-to-many Splatting for Efficient Video Frame Interpolation [80.10804399840927]
モーションベースのビデオフレームは、入力から所望の瞬間までの画素をワープするための光学フローに依存している。
many-to-Many (M2M) スプレイティングフレームワークはフレームを効率的に補間する。
M2Mは任意の数のフレーム間を補間する際の計算オーバーヘッドが極小である。
論文 参考訳(メタデータ) (2022-04-07T15:29:42Z) - Dual Pixel Exploration: Simultaneous Depth Estimation and Image
Restoration [77.1056200937214]
本研究では,ぼかしと深度情報をリンクするDPペアの形成について検討する。
本稿では,画像の深さを共同で推定し,復元するためのエンドツーエンドDDDNet(DPベースのDepth and De Network)を提案する。
論文 参考訳(メタデータ) (2020-12-01T06:53:57Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。