論文の概要: RNb-NeuS: Reflectance and Normal-based Multi-View 3D Reconstruction
- arxiv url: http://arxiv.org/abs/2312.01215v1
- Date: Sat, 2 Dec 2023 19:49:27 GMT
- ステータス: 処理完了
- システム内更新日: 2023-12-05 18:28:14.230317
- Title: RNb-NeuS: Reflectance and Normal-based Multi-View 3D Reconstruction
- Title(参考訳): RNb-NeuS:反射率と正規化によるマルチビュー3D再構成
- Authors: Baptiste Brument, Robin Bruneau, Yvain Qu\'eau, Jean M\'elou,
Fran\c{c}ois Bernard Lauze, Jean-Denis, Jean-Denis Durou, Lilian Calvet
- Abstract要約: 本稿では,光度ステレオにより得られる多視点反射率と正規写像を統合するための多目的パラダイムを提案する。
提案手法では, 反射率と正規度の画素ワイドな共同パラメータ化を, 放射光のベクトルとして用いた。
これは、高い曲率または低い視認性を持つ領域の詳細な3D再構成を大幅に改善する。
- 参考スコア(独自算出の注目度): 0.9842069223476793
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: This paper introduces a versatile paradigm for integrating multi-view
reflectance and normal maps acquired through photometric stereo. Our approach
employs a pixel-wise joint re-parameterization of reflectance and normal,
considering them as a vector of radiances rendered under simulated, varying
illumination. This re-parameterization enables the seamless integration of
reflectance and normal maps as input data in neural volume rendering-based 3D
reconstruction while preserving a single optimization objective. In contrast,
recent multi-view photometric stereo (MVPS) methods depend on multiple,
potentially conflicting objectives. Despite its apparent simplicity, our
proposed approach outperforms state-of-the-art approaches in MVPS benchmarks
across F-score, Chamfer distance, and mean angular error metrics. Notably, it
significantly improves the detailed 3D reconstruction of areas with high
curvature or low visibility.
- Abstract(参考訳): 本稿では,多視点反射率と,フォトメトリックステレオで取得した正規マップを統合するための汎用的パラダイムを提案する。
本手法は、反射率と正規値の画素方向のジョイント再パラメータ化をシミュレートされた様々な照明下でレンダリングされた放射のベクトルとして考慮する。
この再パラメータ化により、ニューラルネットワークのボリュームレンダリングに基づく3d再構成において、反射率と正規マップを入力データとしてシームレスに統合することができる。
対照的に、近年のマルチビュー・フォトメトリック・ステレオ(mvps)法は、複数の、潜在的に矛盾する目標に依存する。
その単純さにもかかわらず、提案手法はf-score、chamfer distance、平均角誤差メトリクスを横断するmvpsベンチマークにおいて最先端のアプローチよりも優れている。
特に、高い曲率または視界の低い領域の詳細な3D再構成を大幅に改善する。
関連論文リスト
- NeRSP: Neural 3D Reconstruction for Reflective Objects with Sparse Polarized Images [62.752710734332894]
NeRSPはスパース偏光画像を用いた反射面のニューラル3次元再構成技術である。
偏光画像形成モデルと多視点方位整合性から測光的および幾何学的手がかりを導出する。
我々は6つのビューのみを入力として、最先端の表面再構成結果を達成する。
論文 参考訳(メタデータ) (2024-06-11T09:53:18Z) - GNeRP: Gaussian-guided Neural Reconstruction of Reflective Objects with Noisy Polarization Priors [8.8400072344375]
ニューラルレイディアンス場(NeRF)からの学習面がマルチビューステレオ(MVS)の話題となった
近年の手法は、ランバートのシーンの正確な3次元形状を復元する能力を示した。
しかし、反射シーンにおけるそれらの結果は、特異な放射率と複雑な幾何学の絡み合いにより満足できない。
論文 参考訳(メタデータ) (2024-03-18T15:58:03Z) - SD-MVS: Segmentation-Driven Deformation Multi-View Stereo with Spherical
Refinement and EM optimization [6.886220026399106]
テクスチャレス領域の3次元再構成における課題を解決するために,多視点ステレオ (SD-MVS) を導入する。
私たちは、シーン内のセグメンテーションインスタンスを区別するためにSAM(Segment Anything Model)を採用した最初の人です。
球面座標と正規点の勾配勾配と深度の画素方向探索間隔を組み合わせた独自の精細化戦略を提案する。
論文 参考訳(メタデータ) (2024-01-12T05:25:57Z) - VolRecon: Volume Rendering of Signed Ray Distance Functions for
Generalizable Multi-View Reconstruction [64.09702079593372]
VolRecon は Signed Ray Distance Function (SRDF) を用いた新しい一般化可能な暗黙的再構成法である
DTUデータセットでは、VolReconはスパースビュー再構築においてSparseNeuSを約30%上回り、フルビュー再構築においてMVSNetと同等の精度を達成する。
論文 参考訳(メタデータ) (2022-12-15T18:59:54Z) - Investigating Spherical Epipolar Rectification for Multi-View Stereo 3D
Reconstruction [1.0152838128195467]
主線の違いによる歪みを最小限に抑えるために, エピポーラ補正のための球面モデルを提案する。
提案手法がフレームベースのエピポーラ補正よりも優れていることを示す定性的,定量的評価を行った。
論文 参考訳(メタデータ) (2022-04-08T15:50:20Z) - Extracting Triangular 3D Models, Materials, and Lighting From Images [59.33666140713829]
多視点画像観測による材料と照明の協調最適化手法を提案する。
従来のグラフィックスエンジンにデプロイ可能な,空間的に変化する材料と環境を備えたメッシュを活用します。
論文 参考訳(メタデータ) (2021-11-24T13:58:20Z) - Neural Radiance Fields Approach to Deep Multi-View Photometric Stereo [103.08512487830669]
多視点測光ステレオ問題(MVPS)に対する現代的な解法を提案する。
我々は、光度ステレオ(PS)画像形成モデルを用いて表面配向を取得し、それを多視点のニューラルラディアンス場表現とブレンドして物体の表面形状を復元する。
本手法は,多視点画像のニューラルレンダリングを行い,深部光度ステレオネットワークによって推定される表面の正規性を活用している。
論文 参考訳(メタデータ) (2021-10-11T20:20:03Z) - 3D Human Pose and Shape Regression with Pyramidal Mesh Alignment
Feedback Loop [128.07841893637337]
回帰に基づく手法は最近、単眼画像からヒトのメッシュを再構成する有望な結果を示した。
パラメータの小さな偏差は、推定メッシュと画像のエビデンスの間に顕著な不一致を引き起こす可能性がある。
本稿では,特徴ピラミッドを活用し,予測パラメータを補正するために,ピラミッドメッシュアライメントフィードバック(pymaf)ループを提案する。
論文 参考訳(メタデータ) (2021-03-30T17:07:49Z) - Ladybird: Quasi-Monte Carlo Sampling for Deep Implicit Field Based 3D
Reconstruction with Symmetry [12.511526058118143]
本稿では,SGDに基づく最適化アルゴリズムの一般化と高速収束を理論的に促進するサンプリング手法を提案する。
物体の反射対称性に基づいて,自己閉塞による問題を緩和する特徴融合法を提案する。
提案システムでは,単一入力画像から高品質な3Dオブジェクト再構成を行うことができる。
論文 参考訳(メタデータ) (2020-07-27T09:17:00Z) - Deep 3D Capture: Geometry and Reflectance from Sparse Multi-View Images [59.906948203578544]
本稿では,任意の物体の高品質な形状と複雑な空間変化を持つBRDFを再構成する学習に基づく新しい手法を提案する。
まず、深層多視点ステレオネットワークを用いて、ビューごとの深度マップを推定する。
これらの深度マップは、異なるビューを粗く整列するために使用される。
本稿では,新しい多視点反射率推定ネットワークアーキテクチャを提案する。
論文 参考訳(メタデータ) (2020-03-27T21:28:54Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。