論文の概要: MFM-Net: Unpaired Shape Completion Network with Multi-stage Feature
Matching
- arxiv url: http://arxiv.org/abs/2111.11976v1
- Date: Tue, 23 Nov 2021 16:10:06 GMT
- ステータス: 処理完了
- システム内更新日: 2021-11-24 15:22:35.281829
- Title: MFM-Net: Unpaired Shape Completion Network with Multi-stage Feature
Matching
- Title(参考訳): MFM-Net:マルチステージ特徴マッチングによる不整形整形ネットワーク
- Authors: Zhen Cao, Wenxiao Zhang, Xin Wen, Zhen Dong, Yu-shen Liu, Bisheng Yang
- Abstract要約: 我々は、幾何学的対応の学習を多段階に分解する、MFM-Netと呼ばれる新しい不対形状完備ネットワークを提案する。
MFM-Netは、完全な形状と不完全な形状の間の幾何学的対応を確立するために、より包括的な理解を利用する。
- 参考スコア(独自算出の注目度): 38.63975659511946
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Unpaired 3D object completion aims to predict a complete 3D shape from an
incomplete input without knowing the correspondence between the complete and
incomplete shapes during training. To build the correspondence between two data
modalities, previous methods usually apply adversarial training to match the
global shape features extracted by the encoder. However, this ignores the
correspondence between multi-scaled geometric information embedded in the
pyramidal hierarchy of the decoder, which makes previous methods struggle to
generate high-quality complete shapes. To address this problem, we propose a
novel unpaired shape completion network, named MFM-Net, using multi-stage
feature matching, which decomposes the learning of geometric correspondence
into multi-stages throughout the hierarchical generation process in the point
cloud decoder. Specifically, MFM-Net adopts a dual path architecture to
establish multiple feature matching channels in different layers of the
decoder, which is then combined with the adversarial learning to merge the
distribution of features from complete and incomplete modalities. In addition,
a refinement is applied to enhance the details. As a result, MFM-Net makes use
of a more comprehensive understanding to establish the geometric correspondence
between complete and incomplete shapes in a local-to-global perspective, which
enables more detailed geometric inference for generating high-quality complete
shapes. We conduct comprehensive experiments on several datasets, and the
results show that our method outperforms previous methods of unpaired point
cloud completion with a large margin.
- Abstract(参考訳): unpaired 3d object completionは、トレーニング中の完全な形状と不完全な形状の対応を知らずに、不完全な入力から完全な3d形状を予測することを目的としている。
2つのデータモダリティ間の対応を構築するために、従来の方法は、通常、エンコーダによって抽出された大域的な形状特徴に一致するために逆訓練を適用する。
しかし、これはデコーダのピラミッド階層に埋め込まれた多スケール幾何情報との対応を無視しており、これは従来の手法が高品質な完全形状を生成するのに苦労している。
この問題に対処するために,マルチステージ特徴マッチングを用いて,ポイントクラウドデコーダの階層生成プロセスを通じて幾何対応の学習を多段階に分解する,新しい不対形状補完ネットワーク MFM-Net を提案する。
具体的には、MFM-Netはデュアルパスアーキテクチャを採用し、デコーダの異なる層に複数の特徴マッチングチャネルを確立する。
また、細部を強化するために精細化を加えている。
その結果、mfm-netは、より包括的理解を用いて、完全形状と不完全形状の間の幾何学的対応を局所的からグローバル的な視点で確立し、高品質な完全形状を生成するためのより詳細な幾何学的推論を可能にする。
提案手法は,複数のデータセットを包括的に実験し,提案手法が従来の非対流点雲補完法よりも大きなマージンを持つことを示す。
関連論文リスト
- 360 Layout Estimation via Orthogonal Planes Disentanglement and Multi-view Geometric Consistency Perception [56.84921040837699]
既存のパノラマ配置推定ソリューションは、垂直圧縮されたシーケンスから部屋の境界を復元し、不正確な結果をもたらす傾向にある。
そこで本稿では,直交平面不整合ネットワーク(DOPNet)を提案し,あいまいな意味論を識別する。
また,水平深度と比表現に適した教師なし適応手法を提案する。
本手法は,単分子配置推定と多視点レイアウト推定の両タスクにおいて,他のSoTAモデルよりも優れる。
論文 参考訳(メタデータ) (2023-12-26T12:16:03Z) - DiffComplete: Diffusion-based Generative 3D Shape Completion [114.43353365917015]
3次元レンジスキャンにおける形状完成のための拡散に基づく新しいアプローチを提案する。
私たちはリアリズム、マルチモダリティ、高忠実さのバランスを取ります。
DiffCompleteは2つの大規模3次元形状補完ベンチマークに新しいSOTA性能を設定する。
論文 参考訳(メタデータ) (2023-06-28T16:07:36Z) - Self-Supervised Learning for Multimodal Non-Rigid 3D Shape Matching [15.050801537501462]
我々は、メッシュベースの関数マップ正規化と、メッシュとポイントクラウドデータを結合する対照的な損失を組み合わせた、自己教師型マルチモーダル学習戦略を導入する。
我々の形状マッチングアプローチは、三角形メッシュ、完全点雲、部分的に観察された点雲のモード内対応を得ることを可能にする。
提案手法は,いくつかの挑戦的なベンチマークデータセットに対して,最先端の結果を達成できることを実証する。
論文 参考訳(メタデータ) (2023-03-20T09:47:02Z) - PointMCD: Boosting Deep Point Cloud Encoders via Multi-view Cross-modal
Distillation for 3D Shape Recognition [55.38462937452363]
本稿では,教師として事前訓練されたディープイメージエンコーダ,学生としてディープポイントエンコーダを含む多視点クロスモーダル蒸留アーキテクチャを提案する。
複数ビューの視覚的および幾何学的記述子をペアワイズにアライメントすることで、より強力なディープポイントエンコーダを、疲労や複雑なネットワーク修正を伴わずに得ることができる。
論文 参考訳(メタデータ) (2022-07-07T07:23:20Z) - DFC: Deep Feature Consistency for Robust Point Cloud Registration [0.4724825031148411]
複雑なアライメントシーンのための学習に基づくアライメントネットワークを提案する。
我々は,3DMatchデータセットとKITTIオドメトリデータセットに対するアプローチを検証する。
論文 参考訳(メタデータ) (2021-11-15T08:27:21Z) - PMP-Net: Point Cloud Completion by Learning Multi-step Point Moving
Paths [54.459879603473034]
我々はPMP-Netと呼ばれる新しいニューラルネットワークを設計し、地球移動体の動作を模倣する。
不完全な入力の各点を移動させ、ポイントクラウドを完結させ、ポイント移動パスの合計距離が最も短くなる。
点レベルの厳密でユニークな対応を学習し、不完全な形状と完全なターゲットの間の詳細なトポロジーと構造的関係を捉えることができる。
論文 参考訳(メタデータ) (2020-12-07T01:34:38Z) - DmifNet:3D Shape Reconstruction Based on Dynamic Multi-Branch
Information Fusion [14.585272577456472]
シングルビュー画像からの3Dオブジェクトの再構築は、長年の課題である。
複雑なトポロジーで3次元形状を正確に再構築することは, それまでの作業では困難であった。
2次元画像から任意の位相の高忠実度3次元形状を復元できる動的マルチブランチ情報融合ネットワーク(DmifNet)を提案する。
論文 参考訳(メタデータ) (2020-11-21T11:31:27Z) - Detail Preserved Point Cloud Completion via Separated Feature
Aggregation [26.566021924980706]
ポイントクラウド形状の完成は、3Dビジョンとロボティクスにおいて難しい問題である。
グローバル・ローカル・フィーチャー・アグリゲーション(GLFA)と残像アグリゲーション(RFA)という2つの異なる特徴アグリゲーション戦略を提案する。
提案するネットワークは,特に細部保存における最先端技術よりも優れている。
論文 参考訳(メタデータ) (2020-07-05T16:11:55Z) - Cascaded Refinement Network for Point Cloud Completion [74.80746431691938]
本稿では,細かな物体形状を合成するための粗大な戦略とともに,カスケード型精細化ネットワークを提案する。
部分入力の局所的な詳細と大域的な形状情報を合わせて考えると、既存の詳細を不完全点集合に保存することができる。
また、各局所領域が同じパターンと基底的真理を持つことを保証し、複雑な点分布を学習するパッチ判別器を設計する。
論文 参考訳(メタデータ) (2020-04-07T13:03:29Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。