論文の概要: Single-Shot Shape and Reflectance with Spatial Polarization Multiplexing
- arxiv url: http://arxiv.org/abs/2504.13177v1
- Date: Thu, 17 Apr 2025 17:59:50 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-04-18 14:36:30.216663
- Title: Single-Shot Shape and Reflectance with Spatial Polarization Multiplexing
- Title(参考訳): 空間偏光多重化による単孔形状と反射率
- Authors: Tomoki Ichikawa, Ryo Kawahara, Ko Nishino,
- Abstract要約: 単一偏光画像から物体形状と反射率を再構成するための空間偏光多重化(SPM)を提案する。
色と強度のシングルパターン構造光とは異なり、偏光パターンは肉眼では見えず、自然の表面の外観を保っている。
- 参考スコア(独自算出の注目度): 20.968382043334632
- License:
- Abstract: We propose spatial polarization multiplexing (SPM) for reconstructing object shape and reflectance from a single polarimetric image and demonstrate its application to dynamic surface recovery. Although single-pattern structured light enables single-shot shape reconstruction, the reflectance is challenging to recover due to the lack of angular sampling of incident light and the entanglement of the projected pattern and the surface color texture. We design a spatially multiplexed pattern of polarization that can be robustly and uniquely decoded for shape reconstruction by quantizing the AoLP values. At the same time, our spatial-multiplexing enables single-shot ellipsometry of linear polarization by projecting differently polarized light within a local region, which separates the specular and diffuse reflections for BRDF estimation. We achieve this spatial polarization multiplexing with a constrained de Bruijn sequence. Unlike single-pattern structured light with intensity and color, our polarization pattern is invisible to the naked eye and retains the natural surface appearance which is essential for accurate appearance modeling and also interaction with people. We experimentally validate our method on real data. The results show that our method can recover the shape, the Mueller matrix, and the BRDF from a single-shot polarimetric image. We also demonstrate the application of our method to dynamic surfaces.
- Abstract(参考訳): 単一偏光画像から物体形状と反射率を再構成するための空間偏光多重化(SPM)を提案し,その動的表面回復への応用を実証する。
単一パターン構造光は単発形状の復元を可能にするが,入射光の角度サンプリングの欠如や投影パターンの絡み合いや表面色調の変化により反射率の回復は困難である。
我々は、AoLP値の定量化により、形状再構成のために頑健かつ一意に復号化できる空間多重分極パターンを設計する。
同時に、空間多重化により、局所領域内で異なる偏光を投影することにより、線形偏光の単発エリプソメトリーが可能となり、BRDF推定のためのスペクトル反射と拡散反射を分離する。
この空間分極多重化を制約付きド・ブリュアン列で達成する。
色と強度のシングルパターン構造光とは異なり、偏光パターンは裸眼では見えず、正確な外観モデリングや人との相互作用に欠かせない自然表面の外観を保っている。
本手法を実データ上で実験的に検証する。
その結果,本手法は単発偏光画像から形状,ミュラー行列,BRDFを復元できることがわかった。
また,本手法の動的曲面への応用を実証する。
関連論文リスト
- SS-SfP:Neural Inverse Rendering for Self Supervised Shape from (Mixed) Polarization [21.377923666134116]
偏光の形状 (SfP) は偏光の形状 (SfP) として知られる問題である。
単視点偏光画像から物体やシーンの3次元形状(画素表面の正規度と深さ)を推定する逆レンダリングに基づく新しいフレームワークを提案する。
論文 参考訳(メタデータ) (2024-07-12T14:29:00Z) - NeRSP: Neural 3D Reconstruction for Reflective Objects with Sparse Polarized Images [62.752710734332894]
NeRSPはスパース偏光画像を用いた反射面のニューラル3次元再構成技術である。
偏光画像形成モデルと多視点方位整合性から測光的および幾何学的手がかりを導出する。
我々は6つのビューのみを入力として、最先端の表面再構成結果を達成する。
論文 参考訳(メタデータ) (2024-06-11T09:53:18Z) - S2P3: Self-Supervised Polarimetric Pose Prediction [55.43547228561919]
本稿では,マルチモーダルRGB+ポラリメトリック画像から,最初の自己監督型6次元オブジェクトポーズ予測を提案する。
1) 偏光の幾何学的情報を抽出する物理モデル,2) 教師による知識蒸留方式,3) 異なる制約による自己監督的損失の定式化を含む。
論文 参考訳(メタデータ) (2023-12-02T10:46:40Z) - NeISF: Neural Incident Stokes Field for Geometry and Material Estimation [50.588983686271284]
多視点逆レンダリングは、異なる視点で撮影された一連の画像から形状、材料、照明などのシーンパラメータを推定する問題である。
本稿では,偏光手がかりを用いた曖昧さを低減する多視点逆フレームワークNeISFを提案する。
論文 参考訳(メタデータ) (2023-11-22T06:28:30Z) - DANI-Net: Uncalibrated Photometric Stereo by Differentiable Shadow
Handling, Anisotropic Reflectance Modeling, and Neural Inverse Rendering [75.86523223933912]
非平衡測光ステレオ(UPS)は、未知の光によってもたらされる固有の曖昧さのために困難である。
異方性シャドーハンドリングと異方性リフレクタンスモデリングを備えた逆レンダリングフレームワークであるDANI-Netを提案する。
我々のネットワークは、2つの異なる経路を通る影と異方性反射の手がかりから恩恵を受ける。
論文 参考訳(メタデータ) (2023-03-27T11:10:54Z) - Polarimetric Multi-View Inverse Rendering [13.391866136230165]
偏光カメラは、偏光の角度(AoP)と反射光の偏光の度合い(DoP)が物体の表面の正常と関係しているため、3次元再構成に大きな可能性がある。
入力された多視点カラー偏光画像から抽出した幾何的・測光的・偏光的手がかりを効果的に活用するポラリメトリック多視点逆レンダリング(Polarimetric Multi-View Inverse Rendering, Polarimetric MVIR)と呼ばれる新しい3次元再構成手法を提案する。
論文 参考訳(メタデータ) (2022-12-24T12:12:12Z) - Human Pose and Shape Estimation from Single Polarization Images [45.24275141578927]
本研究では, 偏光誘起幾何学的手がかりを利用して, 単一偏光画像から人間のポーズと形状を推定する。
専用のデータセット(PHSPD)が構築されており、正確なポーズと形状のアノテーションを備えた500Kフレーム以上で構成されている。
偏光カメラは、人間のポーズと形状を推定するための従来のRGBカメラに代わる有望な選択肢として提案されている。
論文 参考訳(メタデータ) (2021-08-15T22:56:18Z) - Polarization Guided Specular Reflection Separation [8.280173807482901]
偏光誘導モデルを用いて、偏光情報を設計した最適化分離戦略に組み込む。
提案手法は,特に難解なシナリオにおいて,鏡像反射を忠実に分離できることを示す。
論文 参考訳(メタデータ) (2021-03-22T08:22:28Z) - Polarimetric Multi-View Inverse Rendering [13.391866136230165]
偏光カメラは、反射光の偏光角(AoP)が物体の表面の正常と関係しているため、3次元再構成に大きな可能性がある。
入力された多視点カラー偏光画像から抽出した幾何的・測光的・偏光的手がかりを利用するポラリメトリック・マルチビュー逆レンダリング(Polarimetric MVIR)と呼ばれる新しい3次元再構成手法を提案する。
論文 参考訳(メタデータ) (2020-07-17T09:00:20Z) - Polarized Reflection Removal with Perfect Alignment in the Wild [66.48211204364142]
野生の偏光画像からの反射を除去するための新しい定式化法を提案する。
まず、既存のリフレクション除去データセットの不整合問題を同定する。
我々は100種類以上のガラスを用いた新しいデータセットを構築し、得られた透過画像は入力された混合画像と完全に一致している。
論文 参考訳(メタデータ) (2020-03-28T13:29:31Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。