論文の概要: General 3D Room Layout from a Single View by Render-and-Compare
- arxiv url: http://arxiv.org/abs/2001.02149v2
- Date: Tue, 21 Jul 2020 15:41:56 GMT
- ステータス: 処理完了
- システム内更新日: 2023-01-13 20:52:54.633312
- Title: General 3D Room Layout from a Single View by Render-and-Compare
- Title(参考訳): Render-and-Compareによる一視点からの一般的な3次元ルームレイアウト
- Authors: Sinisa Stekovic, Shreyas Hampali, Mahdi Rad, Sayan Deb Sarkar,
Friedrich Fraundorfer, Vincent Lepetit
- Abstract要約: 一つの視点から部屋の3次元レイアウトを再構築する新しい手法を提案する。
データセットはScanNetの293の画像で構成されており、正確な3Dレイアウトで注釈を付けました。
- 参考スコア(独自算出の注目度): 36.94817376590415
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We present a novel method to reconstruct the 3D layout of a room (walls,
floors, ceilings) from a single perspective view in challenging conditions, by
contrast with previous single-view methods restricted to cuboid-shaped layouts.
This input view can consist of a color image only, but considering a depth map
results in a more accurate reconstruction. Our approach is formalized as
solving a constrained discrete optimization problem to find the set of 3D
polygons that constitute the layout. In order to deal with occlusions between
components of the layout, which is a problem ignored by previous works, we
introduce an analysis-by-synthesis method to iteratively refine the 3D layout
estimate. As no dataset was available to evaluate our method quantitatively, we
created one together with several appropriate metrics. Our dataset consists of
293 images from ScanNet, which we annotated with precise 3D layouts. It offers
three times more samples than the popular NYUv2 303 benchmark, and a much
larger variety of layouts.
- Abstract(参考訳): 本研究では, 壁面, 床面, 天井面) の3次元レイアウトを, 従来の立方体形状に制限された単一ビュー法とは対照的に, 難易度で一視点で再構築する手法を提案する。
この入力ビューはカラー画像のみで構成されることができるが、深度マップを考慮するとより正確な再構成が得られる。
本手法は制約付き離散最適化問題の解法として定式化され,レイアウトを構成する3次元ポリゴンの集合を求める。
従来の研究では無視されていたレイアウト成分間の閉塞に対処するため,3次元レイアウト推定を反復的に洗練する解析・合成法を提案する。
提案手法を定量的に評価するデータセットが得られなかったため,いくつかの適切な指標を合わせて作成した。
データセットはScanNetの293の画像で構成されており、正確な3Dレイアウトで注釈を付けた。
一般的なNYUv2 303ベンチマークの3倍のサンプルと、はるかに大きなレイアウトを提供する。
関連論文リスト
- High-fidelity 3D GAN Inversion by Pseudo-multi-view Optimization [51.878078860524795]
フォトリアリスティック・ノベルビューを合成可能な高忠実度3次元生成対向ネットワーク(GAN)インバージョン・フレームワークを提案する。
提案手法は,1枚の画像から高忠実度3Dレンダリングを可能にし,AI生成3Dコンテンツの様々な応用に期待できる。
論文 参考訳(メタデータ) (2022-11-28T18:59:52Z) - Towards High-Fidelity Single-view Holistic Reconstruction of Indoor
Scenes [50.317223783035075]
単視点画像から総合的な3次元屋内シーンを再構築するための新しい枠組みを提案する。
詳細なオブジェクト再構成のためのインスタンス整列型暗黙関数(InstPIFu)を提案する。
私たちのコードとモデルは公開されます。
論文 参考訳(メタデータ) (2022-07-18T14:54:57Z) - MCTS with Refinement for Proposals Selection Games in Scene
Understanding [32.92475660892122]
本稿では,モンテカルロ木探索(MCTS)アルゴリズムを適用したシーン理解問題に適用可能な新しい手法を提案する。
提案手法は,提案された提案のプールから,目的語を最大化する提案を共同で選択し,最適化する。
本手法は,部屋配置に厳しい制約を加えることなく,Matterport3Dデータセット上で高い性能を示す。
論文 参考訳(メタデータ) (2022-07-07T10:15:54Z) - Neural 3D Scene Reconstruction with the Manhattan-world Assumption [58.90559966227361]
本稿では,多視点画像から3次元屋内シーンを再構築する課題について述べる。
平面的制約は、最近の暗黙の神経表現に基づく再構成手法に便利に組み込むことができる。
提案手法は, 従来の手法よりも3次元再構成品質に優れていた。
論文 参考訳(メタデータ) (2022-05-05T17:59:55Z) - Learning to Reconstruct 3D Non-Cuboid Room Layout from a Single RGB
Image [32.5277483805739]
単一画像から部屋の囲い3次元構造を再構築することを目的としている。
本稿では,室内のより一般的な仮定,すなわち1つの天井,1つの床,2つの垂直壁からなる部屋配置について考察する。
論文 参考訳(メタデータ) (2021-04-16T09:24:08Z) - LED2-Net: Monocular 360 Layout Estimation via Differentiable Depth
Rendering [59.63979143021241]
パノラマの地平線上での深度予測問題として360度レイアウト推定のタスクを定式化する。
レイアウトから深度予測への変換を区別できるように、差分可能な深度レンダリング手順を提案します。
提案手法は,360 レイアウトのベンチマークデータセットで最先端のパフォーマンスを実現する。
論文 参考訳(メタデータ) (2021-04-01T15:48:41Z) - A Divide et Impera Approach for 3D Shape Reconstruction from Multiple
Views [49.03830902235915]
物体の3次元形状を1つまたは複数の画像から推定することは、最近のディープラーニングによるブレークスルーによって人気を集めている。
本稿では,与えられた視点からの可視情報を統合することで,視点変化の再構築に頼ることを提案する。
提案手法を検証するために,相対的なポーズ推定と3次元形状再構成の観点から,ShapeNet参照ベンチマークの総合評価を行った。
論文 参考訳(メタデータ) (2020-11-17T09:59:32Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。