論文の概要: FastSurf: Fast Neural RGB-D Surface Reconstruction using Per-Frame
Intrinsic Refinement and TSDF Fusion Prior Learning
- arxiv url: http://arxiv.org/abs/2303.04508v1
- Date: Wed, 8 Mar 2023 10:57:14 GMT
- ステータス: 処理完了
- システム内更新日: 2023-03-09 14:23:54.460163
- Title: FastSurf: Fast Neural RGB-D Surface Reconstruction using Per-Frame
Intrinsic Refinement and TSDF Fusion Prior Learning
- Title(参考訳): FastSurf: フレームごとの内在的微細化とTSDF融合による高速ニューラルネットワークRGB-D表面再構成
- Authors: Seunghwan Lee, Gwanmo Park, Hyewon Son, Jiwon Ryu, Han Joo Chae
- Abstract要約: 我々は3次元再構成のための深度情報を含むNeRFフレームワークであるFastSurfを紹介する。
シーン全体の高速かつ正確な表面最適化には、高密度の特徴格子と浅い多層パーセプトロンが使用される。
- 参考スコア(独自算出の注目度): 4.800072244607442
- License: http://creativecommons.org/licenses/by-sa/4.0/
- Abstract: We introduce FastSurf, an accelerated neural radiance field (NeRF) framework
that incorporates depth information for 3D reconstruction. A dense feature grid
and shallow multi-layer perceptron are used for fast and accurate surface
optimization of the entire scene. Our per-frame intrinsic refinement scheme
corrects the frame-specific errors that cannot be handled by global
optimization. Furthermore, FastSurf utilizes a classical real-time 3D surface
reconstruction method, the truncated signed distance field (TSDF) Fusion, as
prior knowledge to pretrain the feature grid to accelerate the training. The
quantitative and qualitative experiments comparing the performances of FastSurf
against prior work indicate that our method is capable of quickly and
accurately reconstructing a scene with high-frequency details. We also
demonstrate the effectiveness of our per-frame intrinsic refinement and TSDF
Fusion prior learning techniques via an ablation study.
- Abstract(参考訳): 我々は3次元再構成のための深度情報を含むNeRFフレームワークであるFastSurfを紹介する。
密度の高い特徴格子と浅い多層パーセプトロンは、シーン全体の高速かつ正確な表面最適化に使用される。
本手法は,グローバル最適化では処理できないフレーム固有の誤りを補正する。
さらに、FastSurfは従来のリアルタイム3次元表面再構成手法であるTSDFフュージョンを、事前の知識として利用し、特徴格子を事前訓練してトレーニングを加速させる。
本研究では,FastSurfの性能と先行作業とを比較した定量的,定性的な実験により,高速かつ高精度にシーンを再現できることを示す。
また,フレームごとの本質的改良とtsdfの事前学習手法の有効性をアブレーション実験により実証した。
関連論文リスト
- AniSDF: Fused-Granularity Neural Surfaces with Anisotropic Encoding for High-Fidelity 3D Reconstruction [55.69271635843385]
AniSDF(AniSDF)は,高忠実度3次元再構成のための物理に基づく符号化による融合粒度ニューラルサーフェスを学習する新しいアプローチである。
本手法は, 幾何再構成と新規ビュー合成の両面において, SDF法の品質を飛躍的に向上させる。
論文 参考訳(メタデータ) (2024-10-02T03:10:38Z) - Scene 3-D Reconstruction System in Scattering Medium [9.044356059297595]
既存の水中3D再構築システムは、大規模な訓練時間や低効率といった課題に直面している。
本稿では,これらの課題に対処し,高速で高品質な3次元再構成を実現するため,水中3次元再構成システムを提案する。
論文 参考訳(メタデータ) (2023-12-14T14:55:16Z) - UniDream: Unifying Diffusion Priors for Relightable Text-to-3D Generation [101.2317840114147]
We present UniDream, a text-to-3D generation framework by integration priors。
提案手法は,(1)アルベド正規配位型多視点拡散・再構成モデルを得るための2相学習プロセス,(2)訓練された再構成・拡散モデルを用いたスコア蒸留サンプル(SDS)に基づく幾何およびアルベドテクスチャのプログレッシブ生成手順,(3)安定拡散モデルに基づく固定アルベドを保ちながらPBR生成を確定するSDSの革新的な応用,の3つからなる。
論文 参考訳(メタデータ) (2023-12-14T09:07:37Z) - VQ-NeRF: Vector Quantization Enhances Implicit Neural Representations [25.88881764546414]
VQ-NeRFは、ベクトル量子化による暗黙の神経表現を強化するための効率的なパイプラインである。
圧縮および原スケールの両スケールでNeRFモデルを同時に最適化する,革新的なマルチスケールNeRFサンプリング方式を提案する。
我々は3次元再構成の幾何学的忠実度とセマンティックコヒーレンスを改善するためにセマンティックロス関数を組み込んだ。
論文 参考訳(メタデータ) (2023-10-23T01:41:38Z) - Neural Poisson Surface Reconstruction: Resolution-Agnostic Shape
Reconstruction from Point Clouds [53.02191521770926]
我々は,3次元形状を点から復元するという課題に対処する形状再構成アーキテクチャであるニューラルポアソン表面再構成(nPSR)を導入する。
nPSRには2つの大きな利点がある: まず、高分解能評価において同等の性能を達成しつつ、低分解能データの効率的なトレーニングを可能にする。
全体として、ニューラル・ポアソン表面の再構成は、形状再構成における古典的なディープニューラルネットワークの限界を改良するだけでなく、再構築品質、走行時間、分解能非依存の観点からも優れた結果が得られる。
論文 参考訳(メタデータ) (2023-08-03T13:56:07Z) - FineRecon: Depth-aware Feed-forward Network for Detailed 3D
Reconstruction [13.157400338544177]
ポーズ画像からの3次元再構成に関する最近の研究は、深層ニューラルネットワークを用いてシーンレベルの3次元幾何を直接推定できることを実証している。
推論に基づく3次元再構成の忠実度を改善するための有効な3つの方法を提案する。
提案手法はスムーズかつ高精度な再構成を行い,多深度および3次元再構成の指標において顕著な改善が見られた。
論文 参考訳(メタデータ) (2023-04-04T02:50:29Z) - Delicate Textured Mesh Recovery from NeRF via Adaptive Surface
Refinement [78.48648360358193]
画像からテクスチャ化された表面メッシュを生成する新しいフレームワークを提案する。
我々のアプローチは、NeRFを用いて幾何学とビュー依存の外観を効率的に初期化することから始まります。
ジオメトリと共同で外観を洗練し、テクスチャ画像に変換してリアルタイムレンダリングします。
論文 参考訳(メタデータ) (2023-03-03T17:14:44Z) - IRON: Inverse Rendering by Optimizing Neural SDFs and Materials from
Photometric Images [52.021529273866896]
我々は、光メトリック画像を操作し、高品質な3Dコンテンツを出力するIRONと呼ばれるニューラルネットワーク逆レンダリングパイプラインを提案する。
提案手法は, 符号付き距離場 (SDF) と材料として, その柔軟性とコンパクトさを享受するために, 形状のニューラル表現を最適化中に採用する。
我々のIRONは、以前の作品に比べて、逆レンダリング品質が大幅に向上していることが示される。
論文 参考訳(メタデータ) (2022-04-05T14:14:18Z) - NerfingMVS: Guided Optimization of Neural Radiance Fields for Indoor
Multi-view Stereo [97.07453889070574]
本稿では,従来のSfM再構成と学習に基づく先行手法を併用した多視点深度推定手法を提案する。
提案手法は室内シーンにおける最先端手法を著しく上回ることを示す。
論文 参考訳(メタデータ) (2021-09-02T17:54:31Z) - Efficient Surfel Fusion Using Normalised Information Distance [0.0]
本稿では,核融合による高密度3次元マッピングシステムに必要な測定量の大幅な削減を実現する新しい手法を提案する。
これは正規化情報距離メートル法を用いて達成される。
ICL-NUIMとTUM RGB-Dの両方のデータセットに適用し,その拡張性と結果の精度について報告する。
論文 参考訳(メタデータ) (2021-08-11T11:28:31Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。