論文の概要: Depth-NeuS: Neural Implicit Surfaces Learning for Multi-view
Reconstruction Based on Depth Information Optimization
- arxiv url: http://arxiv.org/abs/2303.17088v1
- Date: Thu, 30 Mar 2023 01:19:27 GMT
- ステータス: 処理完了
- システム内更新日: 2023-03-31 14:42:22.044514
- Title: Depth-NeuS: Neural Implicit Surfaces Learning for Multi-view
Reconstruction Based on Depth Information Optimization
- Title(参考訳): Depth-NeuS:深度情報最適化に基づく多視点再構成のためのニューラルインシシデント表面学習
- Authors: Hanqi Jiang, Cheng Zeng, Runnan Chen, Shuai Liang, Yinhe Han, Yichao
Gao, Conglin Wang
- Abstract要約: ニュートラルサーフェス表現とレンダリングの方法、例えばNeuSは、ボリュームレンダリングを通じてニュートラルサーフェスを学習することがますます人気になっていることを示した。
既存の手法では深度情報の直接表現が欠けているため、幾何学的特徴によって物体の再構成が制限されない。
これは、既存の手法では、深度情報を使わずに表面の正規表現しか使わないためである。
多視点再構成のための深度情報最適化に基づくDepth-NeuSと呼ばれる暗黙曲面学習手法を提案する。
- 参考スコア(独自算出の注目度): 6.493546601668505
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Recently, methods for neural surface representation and rendering, for
example NeuS, have shown that learning neural implicit surfaces through volume
rendering is becoming increasingly popular and making good progress. However,
these methods still face some challenges. Existing methods lack a direct
representation of depth information, which makes object reconstruction
unrestricted by geometric features, resulting in poor reconstruction of objects
with texture and color features. This is because existing methods only use
surface normals to represent implicit surfaces without using depth information.
Therefore, these methods cannot model the detailed surface features of objects
well. To address this problem, we propose a neural implicit surface learning
method called Depth-NeuS based on depth information optimization for multi-view
reconstruction. In this paper, we introduce depth loss to explicitly constrain
SDF regression and introduce geometric consistency loss to optimize for
low-texture areas. Specific experiments show that Depth-NeuS outperforms
existing technologies in multiple scenarios and achieves high-quality surface
reconstruction in multiple scenarios.
- Abstract(参考訳): 近年、例えばNeuSのようなニューラルサーフェス表現とレンダリングの手法は、ボリュームレンダリングによるニューラルサーフェス学習がますます普及し、進歩していることを示している。
しかし、これらの手法は依然としていくつかの課題に直面している。
既存の手法では奥行き情報の直接表現が欠如しており、幾何学的特徴によって物体の復元が制限されないため、テクスチャや色彩的特徴を持つ物体の復元が貧弱である。
これは、既存の手法では、深度情報を使わずに表面の正規表現しか使わないためである。
したがって、これらの手法はオブジェクトの詳細な表面特徴をうまくモデル化できない。
この問題に対処するために,多視点再構成のための深度情報最適化に基づくDepth-NeuSと呼ばれるニューラル暗黙曲面学習手法を提案する。
本稿では,SDF回帰を明示的に制約する深度損失を導入し,低テクスチャ領域に最適化するための幾何整合損失を導入する。
Depth-NeuSは複数のシナリオで既存の技術より優れ、複数のシナリオで高品質な表面再構成を実現する。
関連論文リスト
- NeuSurf: On-Surface Priors for Neural Surface Reconstruction from Sparse
Input Views [41.03837477483364]
本研究では,表面の高度に忠実な再構成を実現するために,地上の事前情報を活用する新しいスパース・ビュー・リコンストラクション・フレームワークを提案する。
具体的には,大域的幾何アライメントと局所的幾何洗練に関するいくつかの制約を設計し,粗い形状と細部を協調的に最適化する。
DTUとBlendedMVSデータセットによる2つの一般的なスパース設定の実験結果は、最先端の手法よりも大幅に改善されたことを示している。
論文 参考訳(メタデータ) (2023-12-21T16:04:45Z) - Indoor Scene Reconstruction with Fine-Grained Details Using Hybrid Representation and Normal Prior Enhancement [50.56517624931987]
多視点RGB画像からの室内シーンの再構成は、平坦領域とテクスチャレス領域の共存により困難である。
近年の手法では、予測された表面正規化によって支援されたニューラルラジアンス場を利用してシーン形状を復元している。
本研究は, 上記の制限に対処して, 高忠実度表面を細かな詳細で再構築することを目的とする。
論文 参考訳(メタデータ) (2023-09-14T12:05:29Z) - Neural Poisson Surface Reconstruction: Resolution-Agnostic Shape
Reconstruction from Point Clouds [53.02191521770926]
我々は,3次元形状を点から復元するという課題に対処する形状再構成アーキテクチャであるニューラルポアソン表面再構成(nPSR)を導入する。
nPSRには2つの大きな利点がある: まず、高分解能評価において同等の性能を達成しつつ、低分解能データの効率的なトレーニングを可能にする。
全体として、ニューラル・ポアソン表面の再構成は、形状再構成における古典的なディープニューラルネットワークの限界を改良するだけでなく、再構築品質、走行時間、分解能非依存の観点からも優れた結果が得られる。
論文 参考訳(メタデータ) (2023-08-03T13:56:07Z) - SC-NeuS: Consistent Neural Surface Reconstruction from Sparse and Noisy
Views [20.840876921128956]
本稿では,ノイズの多いカメラポーズによるスパースビューからの一貫した表面再構成について,特に注目する。
従来のアプローチとは異なり、この論文の重要な違いは、神経表面の明示的な幾何から直接多視点制約を利用することである。
本稿では, SC-NeuS と呼ばれるニューラルサーフェスとカメラポーズの協調学習手法を提案する。
論文 参考訳(メタデータ) (2023-07-12T03:45:45Z) - NeuralUDF: Learning Unsigned Distance Fields for Multi-view
Reconstruction of Surfaces with Arbitrary Topologies [87.06532943371575]
本稿では2次元画像からボリュームレンダリングにより任意の位相で表面を再構成する新しい手法であるNeuralUDFを提案する。
本稿では,表面をUDF(Unsigned Distance Function)として表現し,ニューラルUDF表現を学習するための新しいボリュームレンダリング手法を提案する。
論文 参考訳(メタデータ) (2022-11-25T15:21:45Z) - Recovering Fine Details for Neural Implicit Surface Reconstruction [3.9702081347126943]
そこで我々はD-NeuSを提案する。D-NeuSは、微細な幾何学的詳細を復元できるボリュームレンダリング型ニューラル暗示表面再構成法である。
我々は,SDFゼロクロスの補間により表面点に多視点の特徴的整合性を付与する。
本手法は,高精度な表面を細部で再構成し,その性能を向上する。
論文 参考訳(メタデータ) (2022-11-21T10:06:09Z) - MonoSDF: Exploring Monocular Geometric Cues for Neural Implicit Surface
Reconstruction [72.05649682685197]
最先端のニューラル暗黙法は、多くの入力ビューから単純なシーンの高品質な再構築を可能にする。
これは主に、十分な制約を提供していないRGB再構築損失の固有の曖昧さによって引き起こされる。
近年の単分子形状予測の分野での進歩に触発され, ニューラルな暗黙的表面再構成の改善にこれらの方法が役立つかを探究する。
論文 参考訳(メタデータ) (2022-06-01T17:58:15Z) - NeuS: Learning Neural Implicit Surfaces by Volume Rendering for
Multi-view Reconstruction [88.02850205432763]
物体やシーンを2次元画像入力から高忠実度に再構成するニュートラルサーフェス(NeuS)を提案する。
DVRやIDRのような既存の神経表面再構成アプローチでは、フォアグラウンドマスクを監督する必要がある。
本研究では,従来のボリュームレンダリング手法が表面再構成に固有の幾何学的誤差を引き起こすことを観察する。
マスクの監督なしでもより正確な表面再構成を実現するため,第一次近似ではバイアスのない新しい定式化を提案する。
論文 参考訳(メタデータ) (2021-06-20T12:59:42Z) - 3D Dense Geometry-Guided Facial Expression Synthesis by Adversarial
Learning [54.24887282693925]
本稿では,3次元密度(深度,表面正規度)情報を表現操作に用いる新しいフレームワークを提案する。
既製の最先端3D再構成モデルを用いて深度を推定し,大規模RGB-Depthデータセットを作成する。
実験により,提案手法は競争ベースラインと既存の芸術を大きなマージンで上回ることを示した。
論文 参考訳(メタデータ) (2020-09-30T17:12:35Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。