論文の概要: Robust Isometric Non-Rigid Structure-from-Motion
- arxiv url: http://arxiv.org/abs/2010.04690v2
- Date: Wed, 2 Jun 2021 12:23:42 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-09 06:00:11.634476
- Title: Robust Isometric Non-Rigid Structure-from-Motion
- Title(参考訳): ロバスト等尺非剛性構造
- Authors: Shaifali Parashar, Adrien Bartoli and Daniel Pizarro
- Abstract要約: 非Rigid Structure-from-Motion (NRSfM)は、モノクロ2D画像間の対応から変形可能な3Dオブジェクトを再構成する。
現在のNRSfM法は、対応誤りに対処する統計的堅牢性を欠いている。
等尺性を利用してNRSfMを頑健に解く3ステップの自動パイプラインを提案する。
- 参考スコア(独自算出の注目度): 29.229898443263238
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Non-Rigid Structure-from-Motion (NRSfM) reconstructs a deformable 3D object
from the correspondences established between monocular 2D images. Current NRSfM
methods lack statistical robustness, which is the ability to cope with
correspondence errors.This prevents one to use automatically established
correspondences, which are prone to errors, thereby strongly limiting the scope
of NRSfM. We propose a three-step automatic pipeline to solve NRSfM robustly by
exploiting isometry. Step 1 computes the optical flow from correspondences,
step 2 reconstructs each 3D point's normal vector using multiple reference
images and integrates them to form surfaces with the best reference and step 3
rejects the 3D points that break isometry in their local neighborhood.
Importantly, each step is designed to discard or flag erroneous
correspondences. Our contributions include the robustification of optical flow
by warp estimation, new fast analytic solutions to local normal reconstruction
and their robustification, and a new scale-independent measure of 3D local
isometric coherence. Experimental results show that our robust NRSfM method
consistently outperforms existing methods on both synthetic and real datasets.
- Abstract(参考訳): 非Rigid Structure-from-Motion (NRSfM)は、モノクロ2D画像間の対応から変形可能な3Dオブジェクトを再構成する。
現在のNRSfM法は, 対応誤りに対処できる統計的堅牢性に欠けており, これにより, 誤りを生じやすい自動的な対応が不可能となり, NRSfMの範囲が厳しく制限される。
等尺性を利用してNRSfMを頑健に解く3ステップの自動パイプラインを提案する。
ステップ1は、対応から光の流れを計算し、ステップ2は複数の参照画像を用いて各3D点の正規ベクトルを再構成し、それらを統合して最良の参照で表面を形成する。
重要なことに、各ステップは誤った対応を破棄またはフラグするように設計されている。
我々は,ワープ推定による光学フローのロバスト化,局所正規化とそのロバスト化に対する新しい高速解析解,および3次元局所等長性の新しいスケール非依存測度について考察した。
実験の結果,本手法は合成データと実データの両方において,既存の手法を一貫して上回っていることがわかった。
関連論文リスト
- PF3plat: Pose-Free Feed-Forward 3D Gaussian Splatting [54.7468067660037]
PF3platは、設計選択を検証した包括的なアブレーション研究によってサポートされた、すべてのベンチマークに新しい最先端を設定します。
本フレームワークは,3DGSの高速,スケーラビリティ,高品質な3D再構成とビュー合成機能を活用している。
論文 参考訳(メタデータ) (2024-10-29T15:28:15Z) - Correspondence-Guided SfM-Free 3D Gaussian Splatting for NVS [52.3215552448623]
SfM(Structure-from-Motion)事前処理カメラのポーズのない新しいビュー合成(NVS)は、迅速な応答能力の向上と、可変動作条件に対する堅牢性の向上に不可欠である。
最近のSfMフリー手法は、ポーズ最適化を統合し、共同カメラのポーズ推定とNVSのためのエンドツーエンドフレームワークを設計している。
既存の作業の多くは、L2損失のようなピクセル単位の画像損失関数に依存している。
本研究では,NVSのためのSfMフリー3次元ガウススプラッティングを提案する。
論文 参考訳(メタデータ) (2024-08-16T13:11:22Z) - An Accurate and Real-time Relative Pose Estimation from Triple Point-line Images by Decoupling Rotation and Translation [10.05584976985694]
3D-2D制約は、Visual Odometry (VO) やStructure-from-Motion (SfM) システムで広く使われている。
回転変換デカップリング推定に基づく新しい3次元ポーズ解決器を提案する。
論文 参考訳(メタデータ) (2024-03-18T10:21:05Z) - NIKI: Neural Inverse Kinematics with Invertible Neural Networks for 3D
Human Pose and Shape Estimation [53.25973084799954]
両方向誤差をモデル化したNIKI(Neural Inverse Kinematics with Invertible Neural Network)を提案する。
NIKIは、非可逆ネットワークによる前処理と逆処理の両方から学習することができる。
論文 参考訳(メタデータ) (2023-05-15T12:13:24Z) - Controllable GAN Synthesis Using Non-Rigid Structure-from-Motion [1.7205106391379026]
本研究では,NRSfM(non-rigid structure-from-motion)と深部生成モデルを組み合わせた手法を提案する。
本稿では,3次元形状の変化に対応する2次元GANの潜在空間における軌跡の発見に有効なフレームワークを提案する。
論文 参考訳(メタデータ) (2022-11-14T08:37:55Z) - A Dual-Masked Auto-Encoder for Robust Motion Capture with
Spatial-Temporal Skeletal Token Completion [13.88656793940129]
本稿では, 3次元関節を再構成し, 個々の関節を識別するための適応的, アイデンティティを意識した三角測量モジュールを提案する。
次に,D-MAE(Dual-Masked Auto-Encoder)を提案する。
重大なデータ損失シナリオを扱う上で提案するモデルの能力を実証するために,高精度で挑戦的なモーションキャプチャデータセットに貢献する。
論文 参考訳(メタデータ) (2022-07-15T10:00:43Z) - Orthogonal Matrix Retrieval with Spatial Consensus for 3D Unknown-View
Tomography [58.60249163402822]
未知視トモグラフィ(UVT)は、未知のランダムな向きで2次元投影から3次元密度マップを再構成する。
提案したOMRはより堅牢で、従来の最先端のOMRアプローチよりも大幅に性能が向上している。
論文 参考訳(メタデータ) (2022-07-06T21:40:59Z) - Reinforced Axial Refinement Network for Monocular 3D Object Detection [160.34246529816085]
モノクロ3次元物体検出は、2次元入力画像から物体の位置と特性を抽出することを目的としている。
従来のアプローチでは、空間から3D境界ボックスをサンプリングし、対象オブジェクトと各オブジェクトの関係を推定するが、有効サンプルの確率は3D空間で比較的小さい。
我々は,まず最初の予測から始めて,各ステップで1つの3dパラメータだけを変えて,基礎的真理に向けて徐々に洗練することを提案する。
これは、いくつかのステップの後に報酬を得るポリシーを設計する必要があるため、最適化するために強化学習を採用します。
論文 参考訳(メタデータ) (2020-08-31T17:10:48Z) - Dense Non-Rigid Structure from Motion: A Manifold Viewpoint [162.88686222340962]
Non-Rigid Structure-from-Motion (NRSfM) 問題は、複数のフレームにまたがる2次元特徴対応から変形物体の3次元形状を復元することを目的としている。
提案手法は,ノイズに対する精度,スケーラビリティ,堅牢性を大幅に向上させる。
論文 参考訳(メタデータ) (2020-06-15T09:15:54Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。