論文の概要: NeRD: Neural 3D Reflection Symmetry Detector
- arxiv url: http://arxiv.org/abs/2105.03211v1
- Date: Mon, 19 Apr 2021 17:25:51 GMT
- ステータス: 処理完了
- システム内更新日: 2021-05-11 08:33:36.214771
- Title: NeRD: Neural 3D Reflection Symmetry Detector
- Title(参考訳): NeRD:ニューラル3次元反射対称性検出器
- Authors: Yichao Zhou, Shichen Liu, Yi Ma
- Abstract要約: ニューラル3次元反射対称性検出器NeRDについて述べる。
まず、粗大な戦略で対称性平面を列挙し、それから3次元のコストボリュームを構築することで最良の平面を見つける。
実験の結果,本手法で検出した対称性平面は直接CNN回帰から検出した平面よりもかなり精度が高いことがわかった。
- 参考スコア(独自算出の注目度): 27.626579746101292
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Recent advances have shown that symmetry, a structural prior that most
objects exhibit, can support a variety of single-view 3D understanding tasks.
However, detecting 3D symmetry from an image remains a challenging task.
Previous works either assume that the symmetry is given or detect the symmetry
with a heuristic-based method. In this paper, we present NeRD, a Neural 3D
Reflection Symmetry Detector, which combines the strength of learning-based
recognition and geometry-based reconstruction to accurately recover the normal
direction of objects' mirror planes. Specifically, we first enumerate the
symmetry planes with a coarse-to-fine strategy and then find the best ones by
building 3D cost volumes to examine the intra-image pixel correspondence from
the symmetry. Our experiments show that the symmetry planes detected with our
method are significantly more accurate than the planes from direct CNN
regression on both synthetic and real-world datasets. We also demonstrate that
the detected symmetry can be used to improve the performance of downstream
tasks such as pose estimation and depth map regression. The code of this paper
has been made public at https://github.com/zhou13/nerd.
- Abstract(参考訳): 近年の進歩は、ほとんどの物体が示す構造的先行性である対称性が、様々な単一視点の3D理解タスクをサポートすることを示している。
しかし、画像から3次元対称性を検出することは難しい課題である。
以前の研究は対称性が与えられると仮定するか、ヒューリスティックな手法で対称性を検出する。
本稿では,物体の鏡面の通常の方向を正確に再現するために,学習に基づく認識と幾何に基づく再構成の強さを組み合わせたニューラル3次元反射対称性検出器NeRDを提案する。
具体的には、まず対称性面を粗い対極戦略で列挙し、次に3dコストボリュームを構築して、その対称性から画像内画素対応を調べることで最適な面を見つける。
実験により,本手法で検出した対称性平面は,合成および実世界の両方のデータセット上で直接CNN回帰から得られる平面よりも有意に精度が高いことがわかった。
また,検出された対称性をポーズ推定や深度マップ回帰といった下流タスクの性能向上に利用できることを示す。
本論文のコードはhttps://github.com/zhou13/nerd.comで公開されている。
関連論文リスト
- Monocular 3D Object Detection with Depth from Motion [74.29588921594853]
我々は、正確な物体深度推定と検出にカメラエゴモーションを利用する。
我々のフレームワークはDfM(Depth from Motion)と呼ばれ、2D画像の特徴を3D空間に持ち上げて3Dオブジェクトを検出する。
我々のフレームワークは、KITTIベンチマークにおいて最先端の手法よりも大きなマージンで優れている。
論文 参考訳(メタデータ) (2022-07-26T15:48:46Z) - SNeS: Learning Probably Symmetric Neural Surfaces from Incomplete Data [77.53134858717728]
我々はニューラルレイディアンスフィールド(NeRF)のようなニューラルリコンストラクションとレンダリングの最近の進歩の強みの上に構築する。
我々は3次元形状と材料特性にソフト対称性の制約を適用し,光,アルベド色,反射率に分解された外観を有する。
保存されていない領域を高い忠実度で再構成し、高品質な新しいビュー画像を作成することができることを示す。
論文 参考訳(メタデータ) (2022-06-13T17:37:50Z) - Beyond 3DMM: Learning to Capture High-fidelity 3D Face Shape [77.95154911528365]
3Dモーフィブルモデル(3DMM)の適合性は、その強力な3D先行性のため、顔解析に広く有用である。
以前に再建された3次元顔は、微細な形状が失われるため、視差の低下に悩まされていた。
本論文は, パーソナライズされた形状が対応する人物と同一に見えるよう, パーソナライズされた形状を捉えるための完全な解を提案する。
論文 参考訳(メタデータ) (2022-04-09T03:46:18Z) - Robust Extrinsic Symmetry Estimation in 3D Point Clouds [4.416484585765027]
3次元点雲で表される物体の反射対称性面を検出することは、3次元コンピュータビジョンと幾何学処理の基本的な問題である。
本稿では,外乱や欠落部分に対して頑健な反射対称性の平面に対する統計的推定器に基づくアプローチを提案する。
論文 参考訳(メタデータ) (2021-09-21T03:09:51Z) - Probabilistic and Geometric Depth: Detecting Objects in Perspective [78.00922683083776]
3次元物体検出は、運転支援システムなどの様々な実用用途で必要とされる重要な機能である。
双眼視やLiDARに頼っている従来の設定に比べて、経済的な解決策として単眼3D検出が注目されているが、それでも満足のいく結果が得られていない。
本稿ではまず,この問題に関する系統的研究を行い,現在の単分子3次元検出問題をインスタンス深度推定問題として単純化できることを考察する。
論文 参考訳(メタデータ) (2021-07-29T16:30:33Z) - Recurrently Estimating Reflective Symmetry Planes from Partial
Pointclouds [5.098175145801009]
代わりに、高さ次元に沿ってデータをスライスし、2次元畳み込み再帰回帰スキームに順次渡す新しい符号化法を提案する。
提案手法は,全合成対象の平面反射対称性推定作業における最先端技術に匹敵する精度を有することを示す。
論文 参考訳(メタデータ) (2021-06-30T15:26:15Z) - Neural Descent for Visual 3D Human Pose and Shape [67.01050349629053]
入力RGB画像から3次元のポーズと形状を復元するディープニューラルネットワーク手法を提案する。
我々は最近導入された表現力のあるボディ統計モデルGHUMに頼っている。
我々の方法論の中心は、HUmanNeural Descent (HUND)と呼ばれるアプローチの学習と最適化である。
論文 参考訳(メタデータ) (2020-08-16T13:38:41Z) - SymmetryNet: Learning to Predict Reflectional and Rotational Symmetries
of 3D Shapes from Single-View RGB-D Images [26.38270361331076]
本稿では3次元物体の反射対称性と回転対称性の両方を予測できるエンドツーエンドのディープニューラルネットワークを提案する。
単視点RGB-D画像に基づく3次元対称性検出のベンチマークにも貢献する。
論文 参考訳(メタデータ) (2020-08-02T14:10:09Z) - Learning to Detect 3D Reflection Symmetry for Single-View Reconstruction [32.14605731030579]
単一のRGB画像からの3D再構成は、コンピュータビジョンにおいて難しい問題である。
従来の手法は通常データ駆動であり、不正確な3次元形状の復元と限定的な一般化能力をもたらす。
本稿では,人造物体によく見られる反射対称性の鏡面を初めて検出し,その対称性の画素内対応を見いだして深度マップを予測する。
論文 参考訳(メタデータ) (2020-06-17T17:58:59Z) - Deep 3D Portrait from a Single Image [54.634207317528364]
1枚の肖像画から人間の頭部の3次元形状を復元するための学習に基づくアプローチを提案する。
顔画像から3次元頭部再構成を学習するための2段階の幾何学的学習手法を提案する。
提案手法の精度を3次元画像と2次元画像のポーズ操作の両方で評価した。
論文 参考訳(メタデータ) (2020-04-24T08:55:37Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。