論文の概要: SymmetryNet: Learning to Predict Reflectional and Rotational Symmetries
of 3D Shapes from Single-View RGB-D Images
- arxiv url: http://arxiv.org/abs/2008.00485v3
- Date: Sun, 30 Aug 2020 23:56:39 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-03 19:57:13.432301
- Title: SymmetryNet: Learning to Predict Reflectional and Rotational Symmetries
of 3D Shapes from Single-View RGB-D Images
- Title(参考訳): SymmetryNet:シングルビューRGB-D画像から3次元形状の反射・回転対称性を予測する学習
- Authors: Yifei Shi, Junwen Huang, Hongjia Zhang, Xin Xu, Szymon Rusinkiewicz,
Kai Xu
- Abstract要約: 本稿では3次元物体の反射対称性と回転対称性の両方を予測できるエンドツーエンドのディープニューラルネットワークを提案する。
単視点RGB-D画像に基づく3次元対称性検出のベンチマークにも貢献する。
- 参考スコア(独自算出の注目度): 26.38270361331076
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We study the problem of symmetry detection of 3D shapes from single-view
RGB-D images, where severely missing data renders geometric detection approach
infeasible. We propose an end-to-end deep neural network which is able to
predict both reflectional and rotational symmetries of 3D objects present in
the input RGB-D image. Directly training a deep model for symmetry prediction,
however, can quickly run into the issue of overfitting. We adopt a multi-task
learning approach. Aside from symmetry axis prediction, our network is also
trained to predict symmetry correspondences. In particular, given the 3D points
present in the RGB-D image, our network outputs for each 3D point its symmetric
counterpart corresponding to a specific predicted symmetry. In addition, our
network is able to detect for a given shape multiple symmetries of different
types. We also contribute a benchmark of 3D symmetry detection based on
single-view RGB-D images. Extensive evaluation on the benchmark demonstrates
the strong generalization ability of our method, in terms of high accuracy of
both symmetry axis prediction and counterpart estimation. In particular, our
method is robust in handling unseen object instances with large variation in
shape, multi-symmetry composition, as well as novel object categories.
- Abstract(参考訳): 本研究では,一視点rgb-d画像からの3次元形状の対称性検出の問題点について検討する。
入力RGB-D画像に存在する3次元物体の反射対称性と回転対称性の両方を予測できるエンドツーエンドのディープニューラルネットワークを提案する。
しかし、対称性予測のための深層モデルを直接トレーニングすることで、オーバーフィッティングの問題に素早く突き当たることができる。
マルチタスク学習アプローチを採用しています。
対称性軸の予測は別として、ネットワークは対称性の対応を予測するように訓練されている。
特に、RGB-D画像に存在する3Dポイントを考慮すれば、ネットワークは特定の予測対称性に対応する対称な3Dポイントごとに出力する。
さらに,ネットワークは,所定の形状の異なる複数の対称性を検出することができる。
単視点RGB-D画像に基づく3次元対称性検出のベンチマークにも貢献する。
評価の結果,本手法の強い一般化能力は,対称性軸の予測とそれに対応する推定の精度の両面から評価できることがわかった。
特に, 形状のばらつき, 複数対称性の合成, 新規なオブジェクトカテゴリを持つ未知のオブジェクトインスタンスの処理にはロバストである。
関連論文リスト
- PF3plat: Pose-Free Feed-Forward 3D Gaussian Splatting [54.7468067660037]
PF3platは、設計選択を検証した包括的なアブレーション研究によってサポートされた、すべてのベンチマークに新しい最先端を設定します。
本フレームワークは,3DGSの高速,スケーラビリティ,高品質な3D再構成とビュー合成機能を活用している。
論文 参考訳(メタデータ) (2024-10-29T15:28:15Z) - MatchU: Matching Unseen Objects for 6D Pose Estimation from RGB-D Images [57.71600854525037]
RGB-D画像からの6次元ポーズ推定のためのFuse-Describe-Match戦略を提案する。
MatchUは、2Dテクスチャと6Dポーズ予測のための3D幾何学的手がかりを融合する汎用的なアプローチである。
論文 参考訳(メタデータ) (2024-03-03T14:01:03Z) - Partial Symmetry Detection for 3D Geometry using Contrastive Learning
with Geodesic Point Cloud Patches [10.48309709793733]
我々は,測地線点雲パッチの回転,反射,翻訳,スケール不変な局所形状の特徴を学習することを提案する。
この曖昧な問題に対して,本手法は複数の有効な解を抽出可能であることを示す。
検出された対称性を領域成長アルゴリズムと組み合わせて下流タスクを実証する。
論文 参考訳(メタデータ) (2023-12-13T15:48:50Z) - GUPNet++: Geometry Uncertainty Propagation Network for Monocular 3D
Object Detection [95.8940731298518]
我々はGUPNet++(Geometry Uncertainty Propagation Network)を提案する。
トレーニング中の幾何射影の不確実性伝播関係をモデル化し、エンドツーエンドのモデル学習の安定性と効率を向上させる。
実験により,提案手法は画像ベースモノクロ3次元検出におけるSOTA性能を得るだけでなく,簡易なフレームワークで有効性を示す。
論文 参考訳(メタデータ) (2023-10-24T08:45:15Z) - Learning Implicit Probability Distribution Functions for Symmetric
Orientation Estimation from RGB Images Without Pose Labels [23.01797447932351]
RGB-D画像の自動ポーズラベリング方式を提案する。
我々は、RGB画像の向き仮説の確率を推定するために、インプリシットPDFモデルを訓練する。
SO(3)多様体の効率的な階層的サンプリングは、完備な対称性の集合を抽出可能な生成を可能にする。
論文 参考訳(メタデータ) (2022-11-21T12:07:40Z) - Beyond 3DMM: Learning to Capture High-fidelity 3D Face Shape [77.95154911528365]
3Dモーフィブルモデル(3DMM)の適合性は、その強力な3D先行性のため、顔解析に広く有用である。
以前に再建された3次元顔は、微細な形状が失われるため、視差の低下に悩まされていた。
本論文は, パーソナライズされた形状が対応する人物と同一に見えるよう, パーソナライズされた形状を捉えるための完全な解を提案する。
論文 参考訳(メタデータ) (2022-04-09T03:46:18Z) - Recurrently Estimating Reflective Symmetry Planes from Partial
Pointclouds [5.098175145801009]
代わりに、高さ次元に沿ってデータをスライスし、2次元畳み込み再帰回帰スキームに順次渡す新しい符号化法を提案する。
提案手法は,全合成対象の平面反射対称性推定作業における最先端技術に匹敵する精度を有することを示す。
論文 参考訳(メタデータ) (2021-06-30T15:26:15Z) - Extreme Rotation Estimation using Dense Correlation Volumes [73.35119461422153]
本稿では,RGB画像対の相対的な3次元回転を極端に推定する手法を提案する。
画像が重なり合わなくても、それらの幾何学的関係に関して豊富な隠れた手がかりがあるかもしれないと観察する。
本稿では,2つの入力画像間の全ての点を比較することで,そのような暗黙の手がかりを自動的に学習できるネットワーク設計を提案する。
論文 参考訳(メタデータ) (2021-04-28T02:00:04Z) - NeRD: Neural 3D Reflection Symmetry Detector [27.626579746101292]
ニューラル3次元反射対称性検出器NeRDについて述べる。
まず、粗大な戦略で対称性平面を列挙し、それから3次元のコストボリュームを構築することで最良の平面を見つける。
実験の結果,本手法で検出した対称性平面は直接CNN回帰から検出した平面よりもかなり精度が高いことがわかった。
論文 参考訳(メタデータ) (2021-04-19T17:25:51Z) - Learning to Detect 3D Reflection Symmetry for Single-View Reconstruction [32.14605731030579]
単一のRGB画像からの3D再構成は、コンピュータビジョンにおいて難しい問題である。
従来の手法は通常データ駆動であり、不正確な3次元形状の復元と限定的な一般化能力をもたらす。
本稿では,人造物体によく見られる反射対称性の鏡面を初めて検出し,その対称性の画素内対応を見いだして深度マップを予測する。
論文 参考訳(メタデータ) (2020-06-17T17:58:59Z) - EPOS: Estimating 6D Pose of Objects with Symmetries [57.448933686429825]
1つのRGB入力から利用可能な3次元モデルを用いて、剛体物体の6次元ポーズを推定する新しい手法を提案する。
オブジェクトは、体系的な方法で対称性を許容するコンパクトな表面フラグメントによって表現される。
エンコーダデコーダネットワークを用いて,高密度サンプリング画素とフラグメントの対応性を予測する。
論文 参考訳(メタデータ) (2020-04-01T17:41:08Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。