論文の概要: ImLoveNet: Misaligned Image-supported Registration Network for
Low-overlap Point Cloud Pairs
- arxiv url: http://arxiv.org/abs/2207.00826v1
- Date: Sat, 2 Jul 2022 13:17:34 GMT
- ステータス: 処理完了
- システム内更新日: 2022-07-05 14:37:01.518101
- Title: ImLoveNet: Misaligned Image-supported Registration Network for
Low-overlap Point Cloud Pairs
- Title(参考訳): imlovenet:低オーバーラップポイントクラウドペアのための画像支援登録ネットワーク
- Authors: Honghua Chen, Zeyong Wei, Yabin Xu, Mingqiang Wei, Jun Wang
- Abstract要約: 対の点雲間の低オーバーラップ領域は、捕獲された特徴を非常に低信頼にする。
我々は,ImLoveNetと呼ばれる低オーバーラップ点雲対に対する画像対応登録ネットワークを提案する。
- 参考スコア(独自算出の注目度): 14.377604289952188
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Low-overlap regions between paired point clouds make the captured features
very low-confidence, leading cutting edge models to point cloud registration
with poor quality. Beyond the traditional wisdom, we raise an intriguing
question: Is it possible to exploit an intermediate yet misaligned image
between two low-overlap point clouds to enhance the performance of cutting-edge
registration models? To answer it, we propose a misaligned image supported
registration network for low-overlap point cloud pairs, dubbed ImLoveNet.
ImLoveNet first learns triple deep features across different modalities and
then exports these features to a two-stage classifier, for progressively
obtaining the high-confidence overlap region between the two point clouds.
Therefore, soft correspondences are well established on the predicted overlap
region, resulting in accurate rigid transformations for registration. ImLoveNet
is simple to implement yet effective, since 1) the misaligned image provides
clearer overlap information for the two low-overlap point clouds to better
locate overlap parts; 2) it contains certain geometry knowledge to extract
better deep features; and 3) it does not require the extrinsic parameters of
the imaging device with respect to the reference frame of the 3D point cloud.
Extensive qualitative and quantitative evaluations on different kinds of
benchmarks demonstrate the effectiveness and superiority of our ImLoveNet over
state-of-the-art approaches.
- Abstract(参考訳): ペア化されたポイントクラウド間の低オーバーラップ領域は、キャプチャーされた特徴を非常に低信頼にし、最先端モデルが品質の悪いクラウド登録をポイントとする。
最先端の登録モデルの性能を高めるために、2つの低オーバーラップポイントクラウド間の中間的かつ不整合のイメージを活用することは可能ですか?
そこで本研究では,ImLoveNetと呼ばれる低オーバーラップ点雲対に対する画像対応登録ネットワークを提案する。
ImLoveNetはまず、異なるモードにわたるトリプルディープ機能を学び、次にこれら機能を2段階の分類器にエクスポートすることで、2点クラウド間の高信頼重複領域を段階的に取得する。
したがって、予測重複領域にソフト対応が確立され、登録のための正確な剛性変換が生じる。
imlovenetは実装が簡単で効果的です。
1) 不一致画像は、2つの低オーバーラップ点雲に対してより明確な重なり情報を提供し、重なり部分の配置をより良くする。
2)より深い特徴を抽出するための幾何学的知識を含む。
3)3D点雲の基準フレームに対して撮像装置の外部パラメータを必要としない。
異なる種類のベンチマークに対する広範囲な質的および定量的評価は、最先端のアプローチよりもImLoveNetの有効性と優位性を示している。
関連論文リスト
- P2P-Bridge: Diffusion Bridges for 3D Point Cloud Denoising [81.92854168911704]
私たちは、Diffusion Schr"odingerブリッジをポイントクラウドに適応させる新しいフレームワークを通じて、ポイントクラウドを飾るタスクに取り組みます。
オブジェクトデータセットの実験では、P2P-Bridgeは既存のメソッドよりも大幅に改善されている。
論文 参考訳(メタデータ) (2024-08-29T08:00:07Z) - Zero-Shot Point Cloud Registration [94.39796531154303]
ZeroRegは、ポイントクラウドデータセットのトレーニングを不要にする最初のゼロショットポイントクラウド登録アプローチである。
ZeroRegの基盤は、キーポイントからポイントクラウドへの画像特徴の新たな移行であり、三次元幾何学的近傍からの情報を集約することによって強化されている。
3DMatch、3DLoMatch、ScanNetなどのベンチマークでは、ZeroRegはそれぞれ84%、46%、75%という印象的なリコール比(RR)を達成した。
論文 参考訳(メタデータ) (2023-12-05T11:33:16Z) - Shrinking unit: a Graph Convolution-Based Unit for CNN-like 3D Point
Cloud Feature Extractors [0.0]
我々は、画像領域からのインスピレーションの欠如が、そのようなギャップの主な原因であると主張している。
我々は,CNNのような3Dポイント・クラウド特徴抽出器の設計のために,Shrinkingユニットと呼ばれるグラフ畳み込み単位を提案する。
論文 参考訳(メタデータ) (2022-09-26T15:28:31Z) - CorrI2P: Deep Image-to-Point Cloud Registration via Dense Correspondence [51.91791056908387]
我々は,CorrI2Pと呼ばれる画像間クラウドの登録問題に対処するための,機能に基づく最初の高密度対応フレームワークを提案する。
具体的には、3次元の点雲の前に2次元画像が1対あるとすると、まずそれらを高次元の特徴空間に変換し、特徴を対称的に重なり合う領域に変換して、画像点雲が重なり合う領域を決定する。
論文 参考訳(メタデータ) (2022-07-12T11:49:31Z) - A Conditional Point Diffusion-Refinement Paradigm for 3D Point Cloud
Completion [69.32451612060214]
実スキャンされた3Dポイントクラウドはしばしば不完全であり、下流アプリケーションのために完全なポイントクラウドを復元することが重要である。
ほとんどの既存のポイントクラウド補完方法は、トレーニングにチャンファー距離(CD)損失を使用する。
本稿では,点雲完了のためのPDR(Point Diffusion-Refinement)パラダイムを提案する。
論文 参考訳(メタデータ) (2021-12-07T06:59:06Z) - FatNet: A Feature-attentive Network for 3D Point Cloud Processing [1.502579291513768]
本稿では,グローバルポイントベースの機能とエッジベースの機能を組み合わせた,新たな機能指向ニューラルネットワーク層であるfat layerを提案する。
当社のアーキテクチャは,ModelNet40データセットで示すように,ポイントクラウド分類のタスクにおける最先端の成果を達成する。
論文 参考訳(メタデータ) (2021-04-07T23:13:56Z) - ParaNet: Deep Regular Representation for 3D Point Clouds [62.81379889095186]
ParaNetは、3Dポイントクラウドを表現するための新しいエンドツーエンドのディープラーニングフレームワークである。
不規則な3D点雲を通常の2Dカラー画像に変換する。
多視点投影とボキセル化に基づく従来の正規表現法とは異なり、提案した表現は微分可能で可逆である。
論文 参考訳(メタデータ) (2020-12-05T13:19:55Z) - End-to-End 3D Point Cloud Learning for Registration Task Using Virtual
Correspondences [17.70819292121181]
3Dポイントのクラウド登録は、2つのポイントのクラウド間の厳密な変換を見つけるのが難しいため、依然として非常に難しいトピックである。
本稿では,ポイントクラウド登録問題を解決するために,エンドツーエンドのディープラーニングに基づくアプローチを提案する。
論文 参考訳(メタデータ) (2020-11-30T06:55:05Z) - PREDATOR: Registration of 3D Point Clouds with Low Overlap [29.285040521765353]
PreDATORは、重複する領域に深い注意を払って、ペアワイズポイントクラウド登録のモデルである。
低オーバーラップのシナリオでは、成功登録率を20%以上向上させる。
また、登録リコールが89%である3DMatchベンチマークの新たな状態も設定されている。
論文 参考訳(メタデータ) (2020-11-25T20:25:03Z) - GRNet: Gridding Residual Network for Dense Point Cloud Completion [54.43648460932248]
完全な3Dポイントクラウドを不完全なクラウドから推定することは、多くのビジョンやロボティクスアプリケーションにおいて重要な問題である。
本稿では,ポイントクラウド補完のための新しいGridding Residual Network(GRNet)を提案する。
実験結果から,提案したGRNetはShapeNet,Completion3D,KITTIベンチマークの最先端手法に対して良好に動作することがわかった。
論文 参考訳(メタデータ) (2020-06-06T02:46:39Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。