論文の概要: Epipolar Focus Spectrum: A Novel Light Field Representation and
Application in Dense-view Reconstruction
- arxiv url: http://arxiv.org/abs/2204.00193v1
- Date: Fri, 1 Apr 2022 04:01:46 GMT
- ステータス: 処理完了
- システム内更新日: 2022-04-04 15:24:25.261347
- Title: Epipolar Focus Spectrum: A Novel Light Field Representation and
Application in Dense-view Reconstruction
- Title（参考訳）: エピポーラ焦点スペクトル:新しい光場表現と高密度視野再構成への応用
- Authors: Yaning Li, Xue Wang, Hao Zhu, Guoqing Zhou, and Qing Wang
- Abstract要約: エピポーラ平面画像(EPI)やサブアパーチャ画像(サブアパーチャ画像)のような既存の光場表現は、ビュー全体の構造的特徴を考慮しない。
本稿では、EPIスペクトルを再構成することで、新しいエピポーラ焦点スペクトル(EFS)表現を提案する。
- 参考スコア（独自算出の注目度）: 12.461169608271812
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Existing light field representations, such as epipolar plane image (EPI) and
sub-aperture images, do not consider the structural characteristics across the
views, so they usually require additional disparity and spatial structure cues
for follow-up tasks. Besides, they have difficulties dealing with occlusions or
larger disparity scenes. To this end, this paper proposes a novel Epipolar
Focus Spectrum (EFS) representation by rearranging the EPI spectrum. Different
from the classical EPI representation where an EPI line corresponds to a
specific depth, there is a one-to-one mapping from the EFS line to the view.
Accordingly, compared to a sparsely-sampled light field, a densely-sampled one
with the same field of view (FoV) leads to a more compact distribution of such
linear structures in the double-cone-shaped region with the identical opening
angle in its corresponding EFS. Hence the EFS representation is invariant to
the scene depth. To demonstrate its effectiveness, we develop a trainable
EFS-based pipeline for light field reconstruction, where a dense light field
can be reconstructed by compensating the "missing EFS lines" given a sparse
light field, yielding promising results with cross-view consistency, especially
in the presence of severe occlusion and large disparity. Experimental results
on both synthetic and real-world datasets demonstrate the validity and
superiority of the proposed method over SOTA methods.
- Abstract（参考訳）: エピポーラ平面画像(epi)やサブアパーチャ画像といった既存の光場表現は、ビュー全体の構造的特徴を考慮していないため、フォローアップタスクには追加の差異と空間構造手がかりが必要である。
また、オクルージョンや大きな格差シーンを扱うのに苦労している。
そこで本研究では,EPIスペクトルを再構成することで,新しいエピポーラ焦点スペクトル(EFS)表現を提案する。
EPIラインが特定の深さに対応する古典的なEPI表現とは異なり、EFSラインからビューへの1対1マッピングが存在する。
したがって、疎サンプリング光場と比較して、同じ視野(FoV)を持つ密サンプリング光は、対応する EFS において同じ開口角を持つ二重錐状領域において、そのような線形構造のよりコンパクトな分布をもたらす。
したがって、EFS表現はシーン深さに不変である。
その効果を示すために,光電界再構成のための訓練可能なefsベースのパイプラインを開発した。このパイプラインでは,光電界が狭く,特に重度な閉塞と大きな偏差がある場合において,透過型efsラインを補償することにより,密集した光電界を再構築することができる。
合成および実世界の両方のデータセットに対する実験結果は,SOTA法よりも提案手法の有効性と優位性を示す。
関連論文リスト
- Generalizable Non-Line-of-Sight Imaging with Learnable Physical Priors [52.195637608631955]
非視線画像(NLOS)は、その潜在的な応用により注目されている。
既存のNLOS再構成アプローチは、経験的物理的前提に依存して制約される。
本稿では,Learningable Path Compensation(LPC)とAdaptive Phasor Field(APF)の2つの主要な設計を含む,学習に基づく新しいソリューションを提案する。
論文 参考訳（メタデータ） (2024-09-21T04:39:45Z) - Diffusion-based Light Field Synthesis [50.24624071354433]
LFdiffは、LF合成に適した拡散ベースの生成フレームワークである。
本稿では,遠絡型雑音推定ネットワークDistgUnetを提案する。
広範囲な実験により、LFdiffは視覚的に快く、不均一に制御可能な光電場を合成する際に優れていることが示されている。
論文 参考訳（メタデータ） (2024-02-01T13:13:16Z) - Exploring Invariant Representation for Visible-Infrared Person
Re-Identification [77.06940947765406]
異なるスペクトルを横断する歩行者にアイデンティティを関連付けることを目的とした、クロススペクトルの人物再識別は、モダリティの相違の主な課題に直面している。
本稿では、ロバスト機能マイニングネットワーク(RFM)と呼ばれるエンドツーエンドのハイブリッド学習フレームワークにおいて、画像レベルと特徴レベルの両方の問題に対処する。
RegDBとSYSU-MM01という2つの標準的なクロススペクトル人物識別データセットの実験結果により,最先端の性能が示された。
論文 参考訳（メタデータ） (2023-02-02T05:24:50Z) - Light Field Reconstruction Using Convolutional Network on EPI and
Extended Applications [78.63280020581662]
スパースビューからの光場再構成のための新しい畳み込みニューラルネットワーク(CNN)ベースのフレームワークを開発した。
最先端のアルゴリズムと比較して,提案フレームワークの高性能と堅牢性を実証する。
論文 参考訳（メタデータ） (2021-03-24T08:16:32Z) - Deep Anti-aliasing of Whole Focal Stack Using its Slice Spectrum [7.746179634773142]
本研究の目的は,スパース3次元光場から発生する全焦点スタックのエイリアス効果を除去することである。
まず,焦点スタックスライスに埋め込まれた構造特性とその周波数領域表現について検討する。
我々はまた、FSSのエネルギー分布が常に異なる角度サンプリングレートの下で同じ三角形領域内に位置することを観察する。
論文 参考訳（メタデータ） (2021-01-23T05:14:49Z) - EPI-based Oriented Relation Networks for Light Field Depth Estimation [13.120247042876175]
水平および垂直のエピポーラ平面画像(EPI)上の交点の深さ値を推定するために、終端から終端までの完全畳み込みネットワーク(FCN)を提案する。
本稿では,線方向関係を構成するORM(Oriented Relation Module)と呼ばれる新しい特徴抽出モジュールを提案する。
トレーニングを容易にするため,同じシーンポイントのEPIから異なる傾斜を求めるために,リフォーカスに基づくデータ拡張手法を提案する。
論文 参考訳（メタデータ） (2020-07-09T03:39:09Z) - Spatial-Angular Attention Network for Light Field Reconstruction [64.27343801968226]
非局所的な光場における対応を知覚する空間角アテンションネットワークを提案する。
非局所的なアテンション機構により、光界の各画素に対するエピポーラ面の全ての位置からの応答を計算するために、空間角アテンションモジュールが導入された。
次に,低空間スケールでの非局所的注意を効果的に実装するためのマルチスケール再構成構造を提案する。
論文 参考訳（メタデータ） (2020-07-05T06:55:29Z) - Light Field Spatial Super-resolution via Deep Combinatorial Geometry
Embedding and Structural Consistency Regularization [99.96632216070718]
ハンドヘルドデバイスが取得した光フィールド(LF)画像は通常、空間分解能の低下に悩まされる。
LF画像の高次元空間特性と複雑な幾何学構造は、従来の単一像SRよりも問題をより困難にしている。
本稿では,LF画像の各ビューを個別に超解答する新しい学習ベースLFフレームワークを提案する。
論文 参考訳（メタデータ） (2020-04-05T14:39:57Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。