論文の概要: U-mesh: Human Correspondence Matching with Mesh Convolutional Networks
- arxiv url: http://arxiv.org/abs/2108.06695v1
- Date: Sun, 15 Aug 2021 08:58:45 GMT
- ステータス: 処理完了
- システム内更新日: 2021-08-17 15:10:25.990856
- Title: U-mesh: Human Correspondence Matching with Mesh Convolutional Networks
- Title(参考訳): U-mesh: メッシュ畳み込みネットワークによる人間対応マッチング
- Authors: Benjamin Groisser, Alon Wolf, Ron Kimmel
- Abstract要約: 本稿では,パラメータテンプレートモデルを生の走査メッシュに適合させるために,レグレッション(ボトムアップ)と生成(トップダウン)のエレガントな融合を提案する。
最初の大きな貢献は、テンプレート表面への点対応を予測する固有の畳み込みメッシュU-netアーキテクチャである。
FAUST対応課題に対する提案手法の評価を行い,対象者間対応技術の現状を20%(33%)改善する方法について検討した。
- 参考スコア(独自算出の注目度): 15.828285556159026
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: The proliferation of 3D scanning technology has driven a need for methods to
interpret geometric data, particularly for human subjects. In this paper we
propose an elegant fusion of regression (bottom-up) and generative (top-down)
methods to fit a parametric template model to raw scan meshes.
Our first major contribution is an intrinsic convolutional mesh U-net
architecture that predicts pointwise correspondence to a template surface.
Soft-correspondence is formulated as coordinates in a newly-constructed
Cartesian space. Modeling correspondence as Euclidean proximity enables
efficient optimization, both for network training and for the next step of the
algorithm.
Our second contribution is a generative optimization algorithm that uses the
U-net correspondence predictions to guide a parametric Iterative Closest Point
registration. By employing pre-trained human surface parametric models we
maximally leverage domain-specific prior knowledge.
The pairing of a mesh-convolutional network with generative model fitting
enables us to predict correspondence for real human surface scans including
occlusions, partialities, and varying genus (e.g. from self-contact). We
evaluate the proposed method on the FAUST correspondence challenge where we
achieve 20% (33%) improvement over state of the art methods for inter- (intra-)
subject correspondence.
- Abstract(参考訳): 3Dスキャン技術の普及により、幾何学的データ、特に人体に対する解釈方法の必要性が高まっている。
本稿では,パラメトリックテンプレートモデルを生の走査メッシュに適合させるために,回帰(ボトムアップ)と生成(トップダウン)のエレガントな融合を提案する。
最初の大きな貢献は、テンプレート表面への点対応を予測する固有の畳み込みメッシュU-netアーキテクチャである。
ソフト対応は新しく構築されたカルト空間の座標として定式化される。
ユークリッド近接としてのモデリング対応は、ネットワークトレーニングとアルゴリズムの次のステップの両方において効率的な最適化を可能にする。
第2のコントリビューションは、U-net対応予測を用いてパラメトリック反復閉点登録を誘導する生成最適化アルゴリズムである。
事前訓練されたヒト表面パラメトリックモデルを使用することで、ドメイン固有の事前知識を最大限に活用する。
メッシュ-畳み込みネットワークと生成モデルフィッティングのペアリングにより、オクルージョン、部分性、および様々な属を含む実際の人間の表面スキャンの対応を予測できる(例)。
自己接触から)。
FAUST対応課題に対する提案手法の評価を行い,対象者間対応技術の現状を20%(33%)改善する方法について検討した。
関連論文リスト
- Ensemble Quadratic Assignment Network for Graph Matching [52.20001802006391]
グラフマッチングはコンピュータビジョンやパターン認識において一般的に用いられる技法である。
最近のデータ駆動型アプローチは、グラフマッチングの精度を著しく改善した。
データ駆動手法と従来の手法の利点を組み合わせたグラフニューラルネットワーク(GNN)に基づくアプローチを提案する。
論文 参考訳(メタデータ) (2024-03-11T06:34:05Z) - Neural Semantic Surface Maps [52.61017226479506]
本稿では,2つの属とゼロの形状の地図を自動計算する手法を提案する。
提案手法は,手動のアノテーションや3Dトレーニングデータ要求を排除し,意味的表面-表面マップを生成する。
論文 参考訳(メタデータ) (2023-09-09T16:21:56Z) - Iterative Graph Filtering Network for 3D Human Pose Estimation [5.177947445379688]
グラフ畳み込みネットワーク(GCN)は3次元人間のポーズ推定に有効な手法であることが証明されている。
本稿では,3次元ポーズ推定のための反復グラフフィルタリングフレームワークを提案する。
我々のアプローチは、ラプラシア正規化によるグラフフィルタリングを反復的に解くという考え方に基づいている。
論文 参考訳(メタデータ) (2023-07-29T20:46:44Z) - Learnable human mesh triangulation for 3D human pose and shape
estimation [6.699132260402631]
関節回転と形状推定の精度は, マルチビュー画像からスキン付き多対人線形モデル(SMPL)に基づくヒューマンメッシュ再構成において, 比較的注目されていない。
本稿では,関節回転・形状再構成の曖昧さとネットワーク学習の困難さを解消する2段階の手法を提案する。
提案手法は, 接合部の回転および形状推定において従来よりも有意に優れており, 接合位置推定では競争性能が向上する。
論文 参考訳(メタデータ) (2022-08-24T01:11:57Z) - Learned Vertex Descent: A New Direction for 3D Human Model Fitting [64.04726230507258]
画像やスキャンに適合する3次元人体モデルのための新しい最適化手法を提案する。
われわれのアプローチは、非常に異なる体型を持つ服を着た人々の基盤となる身体を捉えることができ、最先端技術と比べて大きな改善を達成できる。
LVDはまた、人間と手の3次元モデル適合にも適用でき、よりシンプルで高速な方法でSOTAに大きな改善が示される。
論文 参考訳(メタデータ) (2022-05-12T17:55:51Z) - NeuroMorph: Unsupervised Shape Interpolation and Correspondence in One
Go [109.88509362837475]
入力2つの3次元形状を考慮したニューラルネットワークアーキテクチャであるNeuroMorphを提案する。
NeuroMorphはそれらの間のスムーズかつポイントツーポイント対応を生成する。
異なる対象カテゴリの非等尺性ペアを含む、さまざまな入力形状に対してうまく機能する。
論文 参考訳(メタデータ) (2021-06-17T12:25:44Z) - Primal-Dual Mesh Convolutional Neural Networks [62.165239866312334]
本稿では,グラフ・ニューラル・ネットワークの文献からトライアングル・メッシュへ引き起こされた原始双対のフレームワークを提案する。
提案手法は,3次元メッシュのエッジと顔の両方を入力として特徴付け,動的に集約する。
メッシュ単純化の文献から得られたツールを用いて、我々のアプローチに関する理論的知見を提供する。
論文 参考訳(メタデータ) (2020-10-23T14:49:02Z) - Human Body Model Fitting by Learned Gradient Descent [48.79414884222403]
画像に3次元の人体形状を適合させる新しいアルゴリズムを提案する。
このアルゴリズムは高速(約120ms収束)で、データセットに頑健であり、公開評価データセットの最先端結果が得られることを示す。
論文 参考訳(メタデータ) (2020-08-19T14:26:47Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。