論文の概要: 3D Reconstruction of Spherical Images based on Incremental Structure
from Motion
- arxiv url: http://arxiv.org/abs/2306.12770v2
- Date: Sat, 24 Jun 2023 11:00:15 GMT
- ステータス: 処理完了
- システム内更新日: 2023-06-27 10:23:17.231411
- Title: 3D Reconstruction of Spherical Images based on Incremental Structure
from Motion
- Title(参考訳): 運動からのインクリメンタル構造に基づく球面画像の3次元再構成
- Authors: San Jiang, Kan You, Yaxin Li, Duojie Weng, Wu Chen
- Abstract要約: 本研究では, 球面対応を用いた相対配向アルゴリズム, シーンと球面間の3次元対応を用いた絶対配向, BA最適化のためのコスト関数について検討した。
上記のアルゴリズムを用いて,球面画像に対して段階的SfM(Structure from Motion)ワークフローを提案する。
- 参考スコア(独自算出の注目度): 2.6432771146480283
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: 3D reconstruction plays an increasingly important role in modern
photogrammetric systems. Conventional satellite or aerial-based remote sensing
(RS) platforms can provide the necessary data sources for the 3D reconstruction
of large-scale landforms and cities. Even with low-altitude UAVs (Unmanned
Aerial Vehicles), 3D reconstruction in complicated situations, such as urban
canyons and indoor scenes, is challenging due to the frequent tracking failures
between camera frames and high data collection costs. Recently, spherical
images have been extensively exploited due to the capability of recording
surrounding environments from one camera exposure. Classical 3D reconstruction
pipelines, however, cannot be used for spherical images. Besides, there exist
few software packages for 3D reconstruction of spherical images. Based on the
imaging geometry of spherical cameras, this study investigates the algorithms
for the relative orientation using spherical correspondences, absolute
orientation using 3D correspondences between scene and spherical points, and
the cost functions for BA (bundle adjustment) optimization. In addition, an
incremental SfM (Structure from Motion) workflow has been proposed for
spherical images using the above-mentioned algorithms. The proposed solution is
finally verified by using three spherical datasets captured by both
consumer-grade and professional spherical cameras. The results demonstrate that
the proposed SfM workflow can achieve the successful 3D reconstruction of
complex scenes and provide useful clues for the implementation in open-source
software packages. The source code of the designed SfM workflow would be made
publicly available.
- Abstract(参考訳): 3次元再構成は、現代のフォトグラムシステムにおいてますます重要な役割を担っている。
従来の衛星や空中リモートセンシング(RS)プラットフォームは、大規模な地形や都市の3D再構成に必要なデータソースを提供することができる。
低高度のuav(無人航空機)でも、都市キャニオンや屋内シーンなどの複雑な状況下での3d再構成は、カメラフレーム間の頻繁なトラッキング障害と高いデータ収集コストのために困難である。
近年,一台のカメラから周囲の環境を撮影できるため,球面画像が広く活用されている。
しかし、古典的な3D再構成パイプラインは球面画像には使用できない。
さらに、球面画像の3次元再構成のためのソフトウェアパッケージは少ない。
球面カメラの画像幾何学に基づいて,球面対応を用いた相対配向アルゴリズム,シーンと球面間の3次元対応を用いた絶対配向,BA(バンドル調整)最適化のためのコスト関数について検討した。
さらに,上述したアルゴリズムを用いて球面画像に対して,段階的なSfMワークフローが提案されている。
提案手法は,コンシューマグレードおよびプロの球面カメラで撮影された3つの球面データセットを用いて検証された。
その結果,提案するsfmワークフローは複雑なシーンの3次元再構成を成功させ,オープンソースソフトウェアパッケージの実装に有用な手掛かりを与えることができた。
設計したSfMワークフローのソースコードが公開されている。
関連論文リスト
- R3D3: Dense 3D Reconstruction of Dynamic Scenes from Multiple Cameras [106.52409577316389]
R3D3は高密度3次元再構成とエゴモーション推定のためのマルチカメラシステムである。
提案手法は,複数のカメラからの時空間情報と単眼深度補正を利用する。
この設計により、困難で動的な屋外環境の密集した一貫した3次元再構成が可能になる。
論文 参考訳(メタデータ) (2023-08-28T17:13:49Z) - FrozenRecon: Pose-free 3D Scene Reconstruction with Frozen Depth Models [67.96827539201071]
本稿では,3次元シーン再構成のための新しいテスト時間最適化手法を提案する。
本手法は5つのゼロショットテストデータセット上で,最先端のクロスデータセット再構築を実現する。
論文 参考訳(メタデータ) (2023-08-10T17:55:02Z) - A Comparative Neural Radiance Field (NeRF) 3D Analysis of Camera Poses
from HoloLens Trajectories and Structure from Motion [0.0]
我々はNeural Radiance Fields (NeRFs) を用いたHoloLensデータから直接の高分解能3次元再構成のためのワークフローを提案する。
NeRFは、カメラのポーズと関連する画像のセットを入力としてトレーニングし、各位置の密度と色値を推定する。
その結果、内部カメラのポーズは、x軸のまわりを単純な回転で25dBのPSNRでNeRF収束し、3D再構成を可能にすることがわかった。
論文 参考訳(メタデータ) (2023-04-20T22:17:28Z) - 3D reconstruction from spherical images: A review of techniques,
applications, and prospects [2.6432771146480283]
3次元再構成は、現代のフォトグラムシステムにおいてますます重要な役割を担っている。
プロ用および消費者向けの球面カメラの急速な進化と広範囲な利用により、球面画像は都市と屋内のシーンの3Dモデリングに大きな可能性を示している。
本研究は,データ取得,特徴検出とマッチング,画像配向,密マッチングの観点から,球面画像の3次元再構成技術の現状を詳細に調査する。
論文 参考訳(メタデータ) (2023-02-09T08:45:27Z) - BS3D: Building-scale 3D Reconstruction from RGB-D Images [25.604775584883413]
本稿では,消費者向け深度カメラを用いた大規模3次元再構築のための使い易いフレームワークを提案する。
複雑で高価な買収設定とは異なり、当社のシステムはクラウドソーシングを可能にする。
論文 参考訳(メタデータ) (2023-01-03T11:46:14Z) - Shape, Pose, and Appearance from a Single Image via Bootstrapped
Radiance Field Inversion [54.151979979158085]
提案手法では,自然画像に対する基本的エンドツーエンド再構築フレームワークを導入し,正確な地平のポーズが得られない。
そこで,モデルが解の第一の推算を生成するハイブリッド・インバージョン・スキームを適用する。
当社のフレームワークでは,イメージを10ステップでデレンダリングすることが可能で,現実的なシナリオで使用することが可能です。
論文 参考訳(メタデータ) (2022-11-21T17:42:42Z) - Hyperspectral 3D Mapping of Underwater Environments [0.7087237546722617]
本稿では,水中環境のハイパースペクトル3次元再構成法について述べる。
従来のRGBカメラ,慣性ナビゲーションシステム,ハイパースペクトルプッシュブルームカメラによって収集されたデータを融合することにより,提案手法が高スペクトルテクスチャを用いた高精度な3次元再構成を実現することを示す。
論文 参考訳(メタデータ) (2021-10-13T08:37:22Z) - Towards Non-Line-of-Sight Photography [48.491977359971855]
非視線イメージング(NLOS)は、隠された物体からの多重バウンス間接反射を捉えることに基づいている。
アクティブなNLOSイメージングシステムは、シーンを通しての光の飛行時間の捕捉に依存している。
我々はNLOS写真と呼ばれる新しい問題定式化を提案し、この欠陥に特に対処する。
論文 参考訳(メタデータ) (2021-09-16T08:07:13Z) - GaussiGAN: Controllable Image Synthesis with 3D Gaussians from Unposed
Silhouettes [48.642181362172906]
対象物の粗い3次元表現を多視点2次元マスク監視から学習するアルゴリズムを提案する。
既存のボクセルを用いた物体再構成法とは対照的に,提案手法は生成した形状やポーズを表現することを学ぶ。
リアル照明を用いた合成データセットの結果を示し、対話的なポーズによるオブジェクト挿入を実証する。
論文 参考訳(メタデータ) (2021-06-24T17:47:58Z) - Lightweight Multi-View 3D Pose Estimation through Camera-Disentangled
Representation [57.11299763566534]
空間校正カメラで撮影した多視点画像から3次元ポーズを復元する手法を提案する。
我々は3次元形状を利用して、入力画像をカメラ視点から切り離したポーズの潜在表現に融合する。
アーキテクチャは、カメラプロジェクション演算子に学習した表現を条件付け、ビュー当たりの正確な2次元検出を生成する。
論文 参考訳(メタデータ) (2020-04-05T12:52:29Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。