論文の概要: SE(3)-Equivariant Attention Networks for Shape Reconstruction in
Function Space
- arxiv url: http://arxiv.org/abs/2204.02394v1
- Date: Tue, 5 Apr 2022 17:59:15 GMT
- ステータス: 処理完了
- システム内更新日: 2022-04-06 12:59:46.283555
- Title: SE(3)-Equivariant Attention Networks for Shape Reconstruction in
Function Space
- Title(参考訳): 関数空間における形状再構成のためのSE(3)-等変アテンションネットワーク
- Authors: Evangelos Chatzipantazis, Stefanos Pertigkiozoglou, Edgar Dobriban,
Kostas Daniilidis
- Abstract要約: 本稿では,第1のSE(3)-equivariant coordinate-based networkを提案する。
入力を正規格子に整列させる従来の形状再構成法とは対照的に、不規則で無向な点雲を直接操作する。
提案手法は,従来のSO(3)-equivariant法,およびSO(3)-augmented dataで訓練された非equivariant法よりも優れていることを示す。
- 参考スコア(独自算出の注目度): 50.14426188851305
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We propose the first SE(3)-equivariant coordinate-based network for learning
occupancy fields from point clouds. In contrast to previous shape
reconstruction methods that align the input to a regular grid, we operate
directly on the irregular, unoriented point cloud. We leverage attention
mechanisms in order to preserve the set structure (permutation equivariance and
variable length) of the input. At the same time, attention layers enable local
shape modelling, a crucial property for scalability to large scenes. In
contrast to architectures that create a global signature for the shape, we
operate on local tokens. Given an unoriented, sparse, noisy point cloud as
input, we produce equivariant features for each point. These serve as keys and
values for the subsequent equivariant cross-attention blocks that parametrize
the occupancy field. By querying an arbitrary point in space, we predict its
occupancy score. We show that our method outperforms previous SO(3)-equivariant
methods, as well as non-equivariant methods trained on SO(3)-augmented
datasets. More importantly, local modelling together with SE(3)-equivariance
create an ideal setting for SE(3) scene reconstruction. We show that by
training only on single objects and without any pre-segmentation, we can
reconstruct a novel scene with single-object performance.
- Abstract(参考訳): 点群から占有場を学習する最初のse(3)同変座標ベースのネットワークを提案する。
入力を正規格子に整列する以前の形状再構成法とは対照的に、不規則で無指向な点雲上で直接操作する。
我々は、入力の集合構造(置換等分散と可変長)を維持するために注意機構を利用する。
同時に、アテンションレイヤは、大きなシーンへのスケーラビリティにとって重要な特性である、ローカルな形状モデリングを可能にする。
形状のグローバルシグネチャを作るアーキテクチャとは対照的に、私たちはローカルトークンで動作します。
非指向、スパース、ノイズのある点クラウドを入力として、各点に対して同値な特徴を生成する。
これらは、占有場をパラメトリゼーションする後続の同変クロスアテンションブロックのキーと値として機能する。
空間内の任意の点を問合せすることで、その占有率を予測する。
提案手法は,従来のSO(3)-equivariant法,およびSO(3)-augmented dataで訓練された非equivariant法よりも優れていることを示す。
さらに重要なことに、se(3)-同値性と共に局所モデリングはse(3)シーン再構成の理想的な設定となる。
本研究では,単一オブジェクトのみをトレーニングし,事前分割を行わずに,単一オブジェクトのパフォーマンスで新しいシーンを再構築できることを示す。
関連論文リスト
- Coupled Laplacian Eigenmaps for Locally-Aware 3D Rigid Point Cloud Matching [0.0]
局所構造を考慮したグラフラプラシアン固有写像に基づく新しい手法を提案する。
ラプラシアン固有写像の順序と符号のあいまいさに対処するために、結合ラプラシアンと呼ばれる新しい作用素を導入する。
これらの高次元空間間の類似性は、形状に一致するような局所的な意味のあるスコアを与えることを示す。
論文 参考訳(メタデータ) (2024-02-27T10:10:12Z) - Generalizing Neural Human Fitting to Unseen Poses With Articulated SE(3)
Equivariance [48.39751410262664]
ArtEqは、点雲からのSMPLモデル推定のための部分ベースSE(3)等価ニューラルネットワークである。
実験の結果,ArtEqはトレーニング中に見えない動作を一般化し,身体再建精度の点で最先端の手法を44%上回った。
論文 参考訳(メタデータ) (2023-04-20T17:58:26Z) - Coarse-to-Fine Point Cloud Registration with SE(3)-Equivariant
Representations [24.772676537277547]
ポイントクラウド登録はコンピュータビジョンとロボティクスにおいて重要な問題である。
どちらも同時に処理する粗大なパイプラインを採用しています。
提案手法は,最先端手法と比較してリコール率を20%向上させる。
論文 参考訳(メタデータ) (2022-10-05T06:35:01Z) - CloudAttention: Efficient Multi-Scale Attention Scheme For 3D Point
Cloud Learning [81.85951026033787]
この作業にトランスフォーマーをセットし、それらを形状分類と部分およびシーンセグメンテーションのための階層的なフレームワークに組み込む。
また、各イテレーションにおけるサンプリングとグループ化を活用して、効率的でダイナミックなグローバルなクロスアテンションを計算します。
提案した階層モデルは,最先端の形状分類を平均精度で達成し,従来のセグメンテーション法と同等の結果を得る。
論文 参考訳(メタデータ) (2022-07-31T21:39:15Z) - E2PN: Efficient SE(3)-Equivariant Point Network [12.520265159777255]
本稿では,3次元点雲からSE(3)-等価特徴を学習するための畳み込み構造を提案する。
カーネルポイント畳み込み(カーネルポイントコンボリューション、カーネルポイントコンボリューション、カーネルポイントコンボリューション、カーネルポイントコンボリューション、カーネルポイントコンボリューション、カーネルポイントコンボリューション、カーネルポイントコンボリューション、カーネルポイントコンボリューション、カーネルポイントコンボリューション、KPConv、カーネルポイントコンボリューション、カーネルポイントコンボリューション、カーネルポイントコンボリューション、カーネルポイントコンボリューション
論文 参考訳(メタデータ) (2022-06-11T02:15:46Z) - Dynamic Convolution for 3D Point Cloud Instance Segmentation [146.7971476424351]
動的畳み込みに基づく3次元点雲からのインスタンスセグメンテーション手法を提案する。
我々は、同じ意味圏と閉投票を持つ等質点を幾何学的遠近点に対して収集する。
提案手法は提案不要であり、代わりに各インスタンスの空間的および意味的特性に適応する畳み込みプロセスを利用する。
論文 参考訳(メタデータ) (2021-07-18T09:05:16Z) - Learning 3D Dense Correspondence via Canonical Point Autoencoder [108.20735652143787]
同一カテゴリの3次元形状間の密接な対応を予測できる標準点オートエンコーダ(CPAE)を提案する。
オートエンコーダは、2つの重要な機能を実行する: (a) 任意に順序付けられた点雲を標準プリミティブに符号化し、 (b) プリミティブを元の入力インスタンス形状に復号する。
論文 参考訳(メタデータ) (2021-07-10T15:54:48Z) - Quaternion Equivariant Capsule Networks for 3D Point Clouds [58.566467950463306]
本稿では,3次元回転と翻訳に同値な点雲を処理するための3次元カプセルモジュールを提案する。
カプセル間の動的ルーティングをよく知られたWeiszfeldアルゴリズムに接続する。
オペレーターに基づいて、ポーズから幾何学をアンタングルするカプセルネットワークを構築します。
論文 参考訳(メタデータ) (2019-12-27T13:51:17Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。