論文の概要: NeuRIS: Neural Reconstruction of Indoor Scenes Using Normal Priors
- arxiv url: http://arxiv.org/abs/2206.13597v1
- Date: Mon, 27 Jun 2022 19:22:03 GMT
- ステータス: 処理完了
- システム内更新日: 2022-06-29 13:38:28.439288
- Title: NeuRIS: Neural Reconstruction of Indoor Scenes Using Normal Priors
- Title(参考訳): NeuRIS: 通常のプライオリティを用いた屋内シーンのニューラルリコンストラクション
- Authors: Jiepeng Wang, Peng Wang, Xiaoxiao Long, Christian Theobalt, Taku
Komura, Lingjie Liu, Wenping Wang
- Abstract要約: 室内シーンを高品質に再現する新手法NeuRISを提案する。
NeuRISは、ニューラルネットワークのフレームワークにおいて、室内シーンの推定正規性を前者として統合している。
実験により、NeuRISは再建品質の点で最先端の手法を著しく上回っていることが示された。
- 参考スコア(独自算出の注目度): 84.66706400428303
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: Reconstructing 3D indoor scenes from 2D images is an important task in many
computer vision and graphics applications. A main challenge in this task is
that large texture-less areas in typical indoor scenes make existing methods
struggle to produce satisfactory reconstruction results. We propose a new
method, named NeuRIS, for high quality reconstruction of indoor scenes. The key
idea of NeuRIS is to integrate estimated normal of indoor scenes as a prior in
a neural rendering framework for reconstructing large texture-less shapes and,
importantly, to do this in an adaptive manner to also enable the reconstruction
of irregular shapes with fine details. Specifically, we evaluate the
faithfulness of the normal priors on-the-fly by checking the multi-view
consistency of reconstruction during the optimization process. Only the normal
priors accepted as faithful will be utilized for 3D reconstruction, which
typically happens in the regions of smooth shapes possibly with weak texture.
However, for those regions with small objects or thin structures, for which the
normal priors are usually unreliable, we will only rely on visual features of
the input images, since such regions typically contain relatively rich visual
features (e.g., shade changes and boundary contours). Extensive experiments
show that NeuRIS significantly outperforms the state-of-the-art methods in
terms of reconstruction quality.
- Abstract(参考訳): 2D画像から3D屋内シーンを再構成することは、多くのコンピュータビジョンやグラフィックスアプリケーションにおいて重要な課題である。
この課題の主な課題は、典型的な屋内シーンの大きなテクスチャのない領域は、既存の方法が十分な復元結果を生み出すのに苦労することである。
本研究では,室内シーンの高品質再現のためのニューロリスという新しい手法を提案する。
NeuRISの鍵となる考え方は、大きなテクスチャのない形状を再構築するニューラルネットワークの枠組みにおいて、屋内の風景の通常の推定と、それを適応的に行うことで、細部で不規則な形状の復元を可能にすることである。
具体的には, 最適化過程における再構築の多視点一貫性を検証し, 実機上における通常の優先順位の忠実性を評価する。
忠実として受け入れられる通常の前駆体だけが3D再構成に利用されるが、これはおそらく弱いテクスチャを持つ滑らかな形状の領域で起こる。
しかし、通常、通常の先行が信頼できないような小さな物体や細い構造を持つ領域では、そのような領域は一般的に比較的リッチな視覚的特徴(例えば、日陰変化や境界輪郭)を含むため、入力画像の視覚的特徴にのみ依存する。
大規模な実験により、NeuRISは再建品質の点で最先端の手法を著しく上回っていることが示された。
関連論文リスト
- ReconFusion: 3D Reconstruction with Diffusion Priors [104.73604630145847]
本稿では,数枚の写真を用いて現実のシーンを再構成するReconFusionを提案する。
提案手法は,合成および多視点データセットに基づいて訓練された新規なビュー合成に先立って拡散を利用する。
本手法は,観測領域の外観を保ちながら,非拘束領域における現実的な幾何学とテクスチャを合成する。
論文 参考訳(メタデータ) (2023-12-05T18:59:58Z) - Indoor Scene Reconstruction with Fine-Grained Details Using Hybrid Representation and Normal Prior Enhancement [50.56517624931987]
多視点RGB画像からの室内シーンの再構成は、平坦領域とテクスチャレス領域の共存により困難である。
近年の手法では、予測された表面正規化によって支援されたニューラルラジアンス場を利用してシーン形状を復元している。
本研究は, 上記の制限に対処して, 高忠実度表面を細かな詳細で再構築することを目的とする。
論文 参考訳(メタデータ) (2023-09-14T12:05:29Z) - Exploiting Multiple Priors for Neural 3D Indoor Reconstruction [15.282699095607594]
本研究では,大規模屋内環境の再現性を向上するために,複数の正規化戦略を活用するニューラル暗黙的モデリング手法を提案する。
実験結果から,本手法は屋内の挑戦的なシナリオにおいて最先端の3D再構成を実現することが示唆された。
論文 参考訳(メタデータ) (2023-09-13T15:23:43Z) - PlaNeRF: SVD Unsupervised 3D Plane Regularization for NeRF Large-Scale
Scene Reconstruction [2.2369578015657954]
ニューラル・ラジアンス・フィールド(NeRF)は2次元画像から3次元シーンを再構成し、新しいビュー・シンセサイザー(NVS)のためのカメラポーズを可能にする
NeRFはオーバーフィットからトレーニングの視点に苦しむことが多く、ジオメトリーの再構築は不十分である。
本稿では,RGB画像とセマンティックマップのみを用いて,NeRFの3次元構造を改善する手法を提案する。
論文 参考訳(メタデータ) (2023-05-26T13:26:46Z) - MonoSDF: Exploring Monocular Geometric Cues for Neural Implicit Surface
Reconstruction [72.05649682685197]
最先端のニューラル暗黙法は、多くの入力ビューから単純なシーンの高品質な再構築を可能にする。
これは主に、十分な制約を提供していないRGB再構築損失の固有の曖昧さによって引き起こされる。
近年の単分子形状予測の分野での進歩に触発され, ニューラルな暗黙的表面再構成の改善にこれらの方法が役立つかを探究する。
論文 参考訳(メタデータ) (2022-06-01T17:58:15Z) - Neural 3D Reconstruction in the Wild [86.6264706256377]
そこで我々は,インターネット写真コレクションから効率よく高精度な表面再構成を実現する新しい手法を提案する。
そこで本研究では,これらのシーンにおける再構成性能を評価するための新しいベンチマークとプロトコルを提案する。
論文 参考訳(メタデータ) (2022-05-25T17:59:53Z) - Fast-GANFIT: Generative Adversarial Network for High Fidelity 3D Face
Reconstruction [76.1612334630256]
我々は、GAN(Generative Adversarial Networks)とDCNN(Deep Convolutional Neural Networks)の力を利用して、単一画像から顔のテクスチャと形状を再構築する。
3次元顔再構成を保存したフォトリアリスティックでアイデンティティに優れた結果を示し, 初めて, 高精度な顔テクスチャ再構成を実現する。
論文 参考訳(メタデータ) (2021-05-16T16:35:44Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。