論文の概要: Hierarchical Aggregation for 3D Instance Segmentation
- arxiv url: http://arxiv.org/abs/2108.02350v1
- Date: Thu, 5 Aug 2021 03:34:34 GMT
- ステータス: 処理完了
- システム内更新日: 2021-08-06 14:42:38.246268
- Title: Hierarchical Aggregation for 3D Instance Segmentation
- Title(参考訳): 3次元インスタンス分割のための階層的集約
- Authors: Shaoyu Chen, Jiemin Fang, Qian Zhang, Wenyu Liu, Xinggang Wang
- Abstract要約: 本稿では,点集合と点集合の空間的関係をフル活用する,HAISというクラスタリングベースのフレームワークを提案する。
ScanNet v2ベンチマークでは、69.9%のAP50を達成し、従来のSOTA(State-of-the-art)メソッドを大きく上回っている。
- 参考スコア(独自算出の注目度): 41.20244892803604
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Instance segmentation on point clouds is a fundamental task in 3D scene
perception. In this work, we propose a concise clustering-based framework named
HAIS, which makes full use of spatial relation of points and point sets.
Considering clustering-based methods may result in over-segmentation or
under-segmentation, we introduce the hierarchical aggregation to progressively
generate instance proposals, i.e., point aggregation for preliminarily
clustering points to sets and set aggregation for generating complete instances
from sets. Once the complete 3D instances are obtained, a sub-network of
intra-instance prediction is adopted for noisy points filtering and mask
quality scoring. HAIS is fast (only 410ms per frame) and does not require
non-maximum suppression. It ranks 1st on the ScanNet v2 benchmark, achieving
the highest 69.9% AP50 and surpassing previous state-of-the-art (SOTA) methods
by a large margin. Besides, the SOTA results on the S3DIS dataset validate the
good generalization ability. Code will be available at
https://github.com/hustvl/HAIS.
- Abstract(参考訳): ポイントクラウド上のインスタンスセグメンテーションは、3Dシーン認識における基本的なタスクである。
本稿では,ポイントとポイント集合の空間的関係を十分に活用した,より簡潔なクラスタリングベースのフレームワークhaisを提案する。
クラスタリングに基づく手法は、過剰なセグメンテーションや過小セグメンテーションをもたらす可能性があるので、階層的アグリゲーションを導入して、段階的にインスタンス提案を生成し、例えば、予め設定した集合へのクラスタリングポイントのためのポイントアグリゲーションと、集合から完全なインスタンスを生成するための集合アグリゲーションを導入する。
完全な3dインスタンスが得られたら、ノイズ点フィルタリングとマスク品質スコアリングにインテント内予測のサブネットワークが採用される。
HAISは高速(フレームあたり410ms)で、非最大抑圧を必要としない。
ScanNet v2ベンチマークでは、69.9%のAP50を達成し、従来のSOTA(State-of-the-art)メソッドを大きく上回っている。
さらに、S3DISデータセット上のSOTA結果は、優れた一般化能力を検証する。
コードはhttps://github.com/hustvl/HAISで入手できる。
関連論文リスト
- ISBNet: a 3D Point Cloud Instance Segmentation Network with
Instance-aware Sampling and Box-aware Dynamic Convolution [14.88505076974645]
ISBNetは、インスタンスをカーネルとして表現し、動的畳み込みを通じてインスタンスマスクをデコードする新しい方法である。
我々は,ScanNetV2 (55.9), S3DIS (60.8), S3LS3D (49.2) にAPの条件で新たな最先端結果を設定し,ScanNetV2のシーンあたり237msの高速推論時間を保持する。
論文 参考訳(メタデータ) (2023-03-01T06:06:28Z) - Divide and Conquer: 3D Point Cloud Instance Segmentation With Point-Wise
Binarization [16.662238192665615]
本稿では, PBNet という新たな分割・分散方式を提案する。
我々のバイナリクラスタリングでは、オフセットインスタンスポイントを高密度と低密度の2つのカテゴリに分けています。
PBNetは、ScanNetV2の公式ベンチマークチャレンジで1位にランクインし、最高mAPを達成した。
論文 参考訳(メタデータ) (2022-07-22T17:19:00Z) - PointInst3D: Segmenting 3D Instances by Points [136.7261709896713]
本稿では,ポイント単位の予測方式で機能する,完全畳み込み型3Dポイントクラウドインスタンスセグメンテーション手法を提案する。
その成功の鍵は、各サンプルポイントに適切なターゲットを割り当てることにある。
提案手法はScanNetとS3DISのベンチマークで有望な結果が得られる。
論文 参考訳(メタデータ) (2022-04-25T02:41:46Z) - MaskGroup: Hierarchical Point Grouping and Masking for 3D Instance
Segmentation [36.28586460186891]
本稿では,ロボット工学や拡張現実といった現実的な応用の多種多様な3Dインスタンスセグメンテーション問題について検討する。
本稿では,3Dインスタンスをグループ化し,洗練するための新しいフレームワークを提案する。
提案手法は,ScanNetV2テストセットの0.5IoU閾値で66.4%のmAPを達成する。
論文 参考訳(メタデータ) (2022-03-28T11:22:58Z) - Sparse Instance Activation for Real-Time Instance Segmentation [72.23597664935684]
本稿では,リアルタイムインスタンスセグメンテーションのための概念的・効率的・完全畳み込み型フレームワークを提案する。
SparseInstは非常に高速な推論速度を持ち、COCOベンチマークで40 FPSと37.9 APを達成した。
論文 参考訳(メタデータ) (2022-03-24T03:15:39Z) - Instance Segmentation in 3D Scenes using Semantic Superpoint Tree
Networks [64.27814530457042]
本稿では,シーンポイントからオブジェクトインスタンスを提案するセマンティックスーパーポイントツリーネットワーク(SSTNet)のエンドツーエンドソリューションを提案する。
SSTNetのキーは中間的セマンティックなスーパーポイントツリー(SST)であり、スーパーポイントの学習されたセマンティックな特徴に基づいて構築されている。
SSTNetはScanNet(V2)のリーダーボードで上位にランクされ、第2のベストメソッドよりもmAPが2%高い。
論文 参考訳(メタデータ) (2021-08-17T07:25:14Z) - SOLO: A Simple Framework for Instance Segmentation [84.00519148562606]
インスタンスカテゴリ"は、インスタンスの場所に応じて、インスタンス内の各ピクセルにカテゴリを割り当てる。
SOLO"は、強力なパフォーマンスを備えたインスタンスセグメンテーションのための、シンプルで、直接的で、高速なフレームワークです。
提案手法は, 高速化と精度の両面から, 実例分割の最先端結果を実現する。
論文 参考訳(メタデータ) (2021-06-30T09:56:54Z) - PointGroup: Dual-Set Point Grouping for 3D Instance Segmentation [111.7241018610573]
私たちは、インスタンスセグメンテーションのための新しいエンドツーエンドボトムアップアーキテクチャであるPointGroupを紹介します。
我々は2分岐ネットワークを設計し、ポイントの特徴を抽出し、セマンティックラベルとオフセットを予測し、各ポイントをそれぞれのインスタンスセントロイドに向けてシフトさせる。
クラスタリングコンポーネントは、元のおよびオフセットシフトされた点座標セットの両方を利用するために、その相補的な強度を利用する。
ScanNet v2 と S3DIS の2つの挑戦的データセットに対する広範な実験を行い、ScanNet v2 と S3DIS が最も高い性能を達成し、63.6% と 64.0% の2つを以前のベストが達成した54.9% と54.4% と比較した。
論文 参考訳(メタデータ) (2020-04-03T16:26:37Z) - 3D-MPA: Multi Proposal Aggregation for 3D Semantic Instance Segmentation [26.169985423367393]
3D-MPAは、3Dポイントクラウド上のインスタンスセグメンテーションの方法である。
同じオブジェクトセンターに投票したグループ化されたポイント機能から提案機能を学びます。
グラフ畳み込みネットワークは、プロトゾス間関係を導入する。
論文 参考訳(メタデータ) (2020-03-30T23:28:50Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。