論文の概要: AdaPoinTr: Diverse Point Cloud Completion with Adaptive Geometry-Aware
Transformers
- arxiv url: http://arxiv.org/abs/2301.04545v1
- Date: Wed, 11 Jan 2023 16:14:12 GMT
- ステータス: 処理完了
- システム内更新日: 2023-01-12 14:12:39.358669
- Title: AdaPoinTr: Diverse Point Cloud Completion with Adaptive Geometry-Aware
Transformers
- Title(参考訳): adapointr:adaptive geometry-aware transformersによる多様なポイントクラウド補完
- Authors: Xumin Yu, Yongming Rao, Ziyi Wang, Jiwen Lu, Jie Zhou
- Abstract要約: 本稿では,ポイントクラウドの完了をセット・ツー・セットの翻訳問題として再定義する手法を提案する。
我々は、ポイントクラウド補完のためにTransformerエンコーダデコーダアーキテクチャを採用したPoinTrと呼ばれる新しいモデルを設計する。
本手法は,PCNで6.53 CD,ShapeNet-55で0.81 CD,現実世界のKITTIで0.392 MMDを実現する。
- 参考スコア(独自算出の注目度): 94.11915008006483
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In this paper, we present a new method that reformulates point cloud
completion as a set-to-set translation problem and design a new model, called
PoinTr, which adopts a Transformer encoder-decoder architecture for point cloud
completion. By representing the point cloud as a set of unordered groups of
points with position embeddings, we convert the input data to a sequence of
point proxies and employ the Transformers for generation. To facilitate
Transformers to better leverage the inductive bias about 3D geometric
structures of point clouds, we further devise a geometry-aware block that
models the local geometric relationships explicitly. The migration of
Transformers enables our model to better learn structural knowledge and
preserve detailed information for point cloud completion. Taking a step towards
more complicated and diverse situations, we further propose AdaPoinTr by
developing an adaptive query generation mechanism and designing a novel
denoising task during completing a point cloud. Coupling these two techniques
enables us to train the model efficiently and effectively: we reduce training
time (by 15x or more) and improve completion performance (over 20%). We also
show our method can be extended to the scene-level point cloud completion
scenario by designing a new geometry-enhanced semantic scene completion
framework. Extensive experiments on the existing and newly-proposed datasets
demonstrate the effectiveness of our method, which attains 6.53 CD on PCN, 0.81
CD on ShapeNet-55 and 0.392 MMD on real-world KITTI, surpassing other work by a
large margin and establishing new state-of-the-arts on various benchmarks. Most
notably, AdaPoinTr can achieve such promising performance with higher
throughputs and fewer FLOPs compared with the previous best methods in
practice. The code and datasets are available at
https://github.com/yuxumin/PoinTr
- Abstract(参考訳): 本稿では,ポイントクラウド完全化をセット・ツー・セットの翻訳問題として再構成し,ポイントクラウド完全化のためにトランスフォーマエンコーダ・デコーダアーキテクチャを採用する,pointrと呼ばれる新しいモデルを設計する新しい手法を提案する。
点雲を位置埋め込みを持つ点群の一組として表現することにより、入力データを点プロキシの列に変換し、変換器を用いて生成する。
点雲の3次元幾何学構造に関する帰納バイアスをよりよく活用するために,局所幾何学的関係を明示的にモデル化する幾何学的ブロックを考案する。
トランスフォーマーの移行によって、モデルが構造知識をよりよく学習し、ポイントクラウド完成のための詳細な情報を保存することができます。
さらに,より複雑で多様な状況に向けて,適応型問合せ生成機構を開発し,ポイントクラウドの完了時に新たな問合せタスクを設計することで adapointr を提案する。
これら2つのテクニックを結合することで、トレーニング時間(15倍以上)を短縮し、完了性能(20%以上)を向上させることができる。
また,新しい幾何学的意味的シーン補完フレームワークを設計すれば,シーンレベルのポイントクラウド補完シナリオに拡張できることを示す。
本手法は,PCNで6.53 CD,ShapeNet-55で0.81 CD,KITTIで0.392 MMDを達成し,他の研究をはるかに上回り,様々なベンチマークで新たな最先端技術を確立した。
最も注目すべきは、adapointrは、以前の最良の方法よりも高いスループットと少ないフロップで、このような有望なパフォーマンスを達成できることです。
コードとデータセットはhttps://github.com/yuxumin/pointrで入手できる。
関連論文リスト
- PointRWKV: Efficient RWKV-Like Model for Hierarchical Point Cloud Learning [56.14518823931901]
NLP分野におけるRWKVモデルから導かれる線形複雑性のモデルであるPointRWKVを提案する。
まず,改良型マルチヘッド行列値状態を用いて,PointRWKVブロック内のグローバル処理機能について検討する。
局所的な幾何学的特徴を同時に抽出するために,グラフ安定化器を用いた固定半径近傍グラフにおいて,点雲を効率的に符号化する並列分岐を設計する。
論文 参考訳(メタデータ) (2024-05-24T05:02:51Z) - Adaptive Point Transformer [88.28498667506165]
Adaptive Point Cloud Transformer (AdaPT) は、適応トークン選択機構によって強化された標準PTモデルである。
AdaPTは推論中のトークン数を動的に削減し、大きな点雲の効率的な処理を可能にする。
論文 参考訳(メタデータ) (2024-01-26T13:24:45Z) - Patch-Wise Point Cloud Generation: A Divide-and-Conquer Approach [83.05340155068721]
分割・分散アプローチを用いた新しい3dポイントクラウド生成フレームワークを考案する。
すべてのパッチジェネレータは学習可能な事前情報に基づいており、幾何学的プリミティブの情報を取得することを目的としている。
最も人気のあるポイントクラウドデータセットであるShapeNetのさまざまなオブジェクトカテゴリに関する実験結果は、提案したパッチワイドポイントクラウド生成の有効性を示している。
論文 参考訳(メタデータ) (2023-07-22T11:10:39Z) - CpT: Convolutional Point Transformer for 3D Point Cloud Processing [10.389972581905]
CpT: Convolutional Point Transformer - 3Dポイントクラウドデータの非構造化の性質を扱うための新しいディープラーニングアーキテクチャ。
CpTは、既存の注目ベースのConvolutions Neural Networksと、以前の3Dポイントクラウド処理トランスフォーマーの改善である。
我々のモデルは、既存の最先端のアプローチと比較して、様々なポイントクラウド処理タスクの効果的なバックボーンとして機能する。
論文 参考訳(メタデータ) (2021-11-21T17:45:55Z) - Graph-Guided Deformation for Point Cloud Completion [35.10606375236494]
本稿では,入力データと中間生成を制御および支持点とみなすグラフガイド変形ネットワークを提案する。
我々の重要な洞察は、メッシュ変形法による最小2乗ラプラシア変形過程をシミュレートすることであり、幾何学的詳細のモデリングに適応性をもたらす。
我々はGCN誘導変形による従来のグラフィックアルゴリズムを模倣して、ポイントクラウド補完タスクを改良した最初の人物である。
論文 参考訳(メタデータ) (2021-11-11T12:55:26Z) - PoinTr: Diverse Point Cloud Completion with Geometry-Aware Transformers [81.71904691925428]
本稿では,ポイントクラウドの完了をセット・ツー・セットの翻訳問題として再定義する手法を提案する。
我々はまた、ポイントクラウド補完のためにトランスフォーマーエンコーダデコーダアーキテクチャを採用するPoinTrと呼ばれる新しいモデルも設計している。
提案手法は,新しいベンチマークと既存ベンチマークの両方において,最先端の手法よりも優れた性能を示す。
論文 参考訳(メタデータ) (2021-08-19T17:58:56Z) - Planning with Learned Dynamic Model for Unsupervised Point Cloud
Registration [25.096635750142227]
我々は,変換ネットワークと評価ネットワークから構成される点雲の潜在動的モデルを開発する。
我々は、ポイントクラウド登録プロセスにおける報酬を最大化し、計画方針を反復的に更新するためにクロスエントロピー法(CEM)を用いる。
ModelNet40および7Sceneベンチマークデータセットの実験結果から,本手法は教師なしで良好な登録性能が得られることが示された。
論文 参考訳(メタデータ) (2021-08-05T13:47:11Z) - SoftPoolNet: Shape Descriptor for Point Cloud Completion and
Classification [93.54286830844134]
本稿では,点雲に基づく3次元オブジェクトの補完と分類手法を提案する。
デコーダの段階では,グローバルな活性化エントロピーの最大化を目的とした新しい演算子である地域畳み込みを提案する。
我々は,オブジェクトの完成度や分類,最先端の精度の達成など,異なる3次元タスクに対するアプローチを評価する。
論文 参考訳(メタデータ) (2020-08-17T14:32:35Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。