論文の概要: PHI-MVS: Plane Hypothesis Inference Multi-view Stereo for Large-Scale
Scene Reconstruction
- arxiv url: http://arxiv.org/abs/2104.06165v1
- Date: Tue, 13 Apr 2021 13:16:00 GMT
- ステータス: 処理完了
- システム内更新日: 2021-04-14 13:26:39.390279
- Title: PHI-MVS: Plane Hypothesis Inference Multi-view Stereo for Large-Scale
Scene Reconstruction
- Title(参考訳): PHI-MVS:大規模シーン再構成のための平面仮説推論多視点ステレオ
- Authors: Shang Sun, Yunan Zheng, Xuelei Shi, Zhenyu Xu, Yiguang Liu
- Abstract要約: これらの領域で類似度測定法が無効になる可能性があるため、テクスチャレス平面の再構成はしばしば失敗する。
上記の問題に対処するために,新しい平面仮説推論戦略を提案する。
平面仮説推論 マルチビューステレオ(PHI-MVS)は、ETH3Dの公開ベンチマークで検証される。
- 参考スコア(独自算出の注目度): 10.060110921968798
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: PatchMatch based Multi-view Stereo (MVS) algorithms have achieved great
success in large-scale scene reconstruction tasks. However, reconstruction of
texture-less planes often fails as similarity measurement methods may become
ineffective on these regions. Thus, a new plane hypothesis inference strategy
is proposed to handle the above issue. The procedure consists of two steps:
First, multiple plane hypotheses are generated using filtered initial depth
maps on regions that are not successfully recovered; Second, depth hypotheses
are selected using Markov Random Field (MRF). The strategy can significantly
improve the completeness of reconstruction results with only acceptable
computing time increasing. Besides, a new acceleration scheme similar to
dilated convolution can speed up the depth map estimating process with only a
slight influence on the reconstruction. We integrated the above ideas into a
new MVS pipeline, Plane Hypothesis Inference Multi-view Stereo (PHI-MVS). The
result of PHI-MVS is validated on ETH3D public benchmarks, and it demonstrates
competing performance against the state-of-the-art.
- Abstract(参考訳): patchmatchベースのマルチビューステレオ(mvs)アルゴリズムは、大規模なシーン復元タスクで大きな成功を収めている。
しかし, 相似性測定法がこれらの領域では有効でないため, テクスチャレス平面の再構成は失敗することが多い。
そこで,上記の問題に対処するために,新たな平面仮説推論戦略を提案する。
手順は2つのステップから構成される: 第一に、複数の平面仮説は、回復できない領域のフィルターされた初期深度マップを用いて生成される;第二に、深さ仮説はマルコフランダム場(MRF)を用いて選択される。
この戦略は、許容できる計算時間を増やすだけで、再構成結果の完全性を大幅に向上させることができる。
さらに、拡張畳み込みに似た新しい加速度スキームは、復元にわずかな影響だけで深度マップ推定プロセスを高速化することができる。
我々はこれらのアイデアを新しいMVSパイプライン、PHI-MVS(Plane hypothesis Inference Multi-view Stereo)に統合した。
PHI-MVSの結果はETH3D公開ベンチマークで検証され、最先端技術に対する競合性能を示す。
関連論文リスト
- SD-MVS: Segmentation-Driven Deformation Multi-View Stereo with Spherical
Refinement and EM optimization [6.886220026399106]
テクスチャレス領域の3次元再構成における課題を解決するために,多視点ステレオ (SD-MVS) を導入する。
私たちは、シーン内のセグメンテーションインスタンスを区別するためにSAM(Segment Anything Model)を採用した最初の人です。
球面座標と正規点の勾配勾配と深度の画素方向探索間隔を組み合わせた独自の精細化戦略を提案する。
論文 参考訳(メタデータ) (2024-01-12T05:25:57Z) - NeuSD: Surface Completion with Multi-View Text-to-Image Diffusion [56.98287481620215]
本稿では,対象物の一部のみを捉えた複数の画像から3次元表面再構成を行う手法を提案する。
提案手法は, 表面の可視部分の再構成に神経放射場を用いた表面再構成法と, SDS (Score Distillation Sampling) 方式で事前学習した2次元拡散モデルを用いて, 可観測領域の形状を再現する手法である。
論文 参考訳(メタデータ) (2023-12-07T19:30:55Z) - MP-MVS: Multi-Scale Windows PatchMatch and Planar Prior Multi-View
Stereo [7.130834755320434]
レジリエントで効果的なマルチビューステレオアプローチ(MP-MVS)を提案する。
マルチスケールウィンドウPatchMatch (mPM) を設計し, 信頼性の高い非テクスチャ領域の深さを求める。
他のマルチスケールアプローチとは対照的に、より高速で、PatchMatchベースのMVSアプローチに容易に拡張できる。
論文 参考訳(メタデータ) (2023-09-23T07:30:42Z) - NeurAR: Neural Uncertainty for Autonomous 3D Reconstruction [64.36535692191343]
暗黙の神経表現はオフラインの3D再構成において魅力的な結果を示しており、オンラインSLAMシステムの可能性も最近示している。
本論文は,1)新しい表現に基づく視点計画の質を評価するための基準を求めること,2)手作りではなく,異なる場面に一般化可能なデータから基準を学習すること,の2つの課題に対処する。
本手法は, TSDFを用いた変形モデルやビュープランニングなしでの再構成モデルと比較した場合, レンダリングされた画像品質と再構成された3次元モデルの幾何学的品質について, 様々な指標について有意な改善を示す。
論文 参考訳(メタデータ) (2022-07-22T10:05:36Z) - Orthogonal Matrix Retrieval with Spatial Consensus for 3D Unknown-View
Tomography [58.60249163402822]
未知視トモグラフィ(UVT)は、未知のランダムな向きで2次元投影から3次元密度マップを再構成する。
提案したOMRはより堅牢で、従来の最先端のOMRアプローチよりも大幅に性能が向上している。
論文 参考訳(メタデータ) (2022-07-06T21:40:59Z) - PlaneMVS: 3D Plane Reconstruction from Multi-View Stereo [32.81496429134453]
カメラのポーズによる複数入力ビューからの3次元平面再構成のための新しいフレームワークPlainMVSを提案する。
対照的に、マルチビュー幾何学を利用するマルチビューステレオ(MVS)パイプラインで3次元平面を再構成する。
本手法は,学習面の先行性により,SOTA学習に基づくMVS手法よりも優れる。
論文 参考訳(メタデータ) (2022-03-22T22:35:46Z) - VolumeFusion: Deep Depth Fusion for 3D Scene Reconstruction [71.83308989022635]
本稿では、ディープニューラルネットワークを用いた従来の2段階フレームワークの複製により、解釈可能性と結果の精度が向上することを提唱する。
ネットワークは,1)深部MVS技術を用いた局所深度マップの局所計算,2)深部マップと画像の特徴を融合させて単一のTSDFボリュームを構築する。
異なる視点から取得した画像間のマッチング性能を改善するために,PosedConvと呼ばれる回転不変な3D畳み込みカーネルを導入する。
論文 参考訳(メタデータ) (2021-08-19T11:33:58Z) - Deep Two-View Structure-from-Motion Revisited [83.93809929963969]
2次元構造移動(SfM)は3次元再構成と視覚SLAMの基礎となる。
古典パイプラインの適切性を活用することで,深部2視点sfmの問題を再検討することを提案する。
本手法は,1)2つのフレーム間の密対応を予測する光フロー推定ネットワーク,2)2次元光フロー対応から相対カメラポーズを計算する正規化ポーズ推定モジュール,3)エピポーラ幾何を利用して探索空間を縮小し,密対応を洗練し,相対深度マップを推定するスケール不変深さ推定ネットワークからなる。
論文 参考訳(メタデータ) (2021-04-01T15:31:20Z) - Multi-view Depth Estimation using Epipolar Spatio-Temporal Networks [87.50632573601283]
一つのビデオから多視点深度を推定する新しい手法を提案する。
提案手法は,新しいEpipolar Spatio-Temporal Transformer(EST)を用いて時間的コヒーレントな深度推定を行う。
最近のMixture-of-Expertsモデルにインスパイアされた計算コストを削減するため、我々はコンパクトなハイブリッドネットワークを設計する。
論文 参考訳(メタデータ) (2020-11-26T04:04:21Z) - Attention Aware Cost Volume Pyramid Based Multi-view Stereo Network for
3D Reconstruction [12.728154351588053]
マルチビュー画像から3次元再構成を行うための効率的なマルチビューステレオ(MVS)ネットワークを提案する。
高分解能深度を実現するために粗粒度深度推論戦略を導入する。
論文 参考訳(メタデータ) (2020-11-25T13:34:11Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。