論文の概要: Bi-Directional Attention for Joint Instance and Semantic Segmentation in
Point Clouds
- arxiv url: http://arxiv.org/abs/2003.05420v1
- Date: Wed, 11 Mar 2020 17:16:07 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-24 14:48:45.928485
- Title: Bi-Directional Attention for Joint Instance and Semantic Segmentation in
Point Clouds
- Title(参考訳): 点群における連関とセマンティックセグメンテーションの双方向注意
- Authors: Guangnan Wu and Zhiyi Pan and Peng Jiang and Changhe Tu
- Abstract要約: バックボーンニューラルネットワーク上にバイディレクショナル・アテンション・モジュールを構築し、3Dポイント・クラウド・インセプションを実現する。
これは、あるタスクの特徴から測定された類似度行列を使用して、他のタスクの非ローカル情報を集約する。
S3DISデータセットとPartNetデータセットに関する総合実験とアブレーション研究から,本手法の優位性を検証した。
- 参考スコア(独自算出の注目度): 9.434847591440485
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: Instance segmentation in point clouds is one of the most fine-grained ways to
understand the 3D scene. Due to its close relationship to semantic
segmentation, many works approach these two tasks simultaneously and leverage
the benefits of multi-task learning. However, most of them only considered
simple strategies such as element-wise feature fusion, which may not lead to
mutual promotion. In this work, we build a Bi-Directional Attention module on
backbone neural networks for 3D point cloud perception, which uses similarity
matrix measured from features for one task to help aggregate non-local
information for the other task, avoiding the potential feature exclusion and
task conflict. From comprehensive experiments and ablation studies on the S3DIS
dataset and the PartNet dataset, the superiority of our method is verified.
Moreover, the mechanism of how bi-directional attention module helps joint
instance and semantic segmentation is also analyzed.
- Abstract(参考訳): ポイントクラウドにおけるインスタンスセグメンテーションは、3dシーンを理解する最もきめ細かい方法の1つです。
セマンティクスセグメンテーションとの密接な関係から、これらの2つのタスクを同時にアプローチし、マルチタスク学習の利点を活用している。
しかし、それらのほとんどは要素的特徴融合のような単純な戦略のみを検討しており、相互の促進には繋がらない可能性がある。
本研究では,3次元ポイントクラウド知覚のためのバックボーンニューラルネットワーク上に双方向アテンションモジュールを構築し,あるタスクの特徴から測定した類似度行列を用いて,他のタスクの非ローカル情報を集約し,潜在的な機能排除やタスク競合を回避する。
S3DISデータセットとPartNetデータセットに関する総合実験とアブレーション研究から,本手法の優位性を検証した。
さらに、双方向アテンションモジュールがジョイントインスタンスやセマンティックセグメンテーションに役立つメカニズムも分析した。
関連論文リスト
- LiSD: An Efficient Multi-Task Learning Framework for LiDAR Segmentation and Detection [6.813145466843275]
LiSDはボクセルベースのエンコーダデコーダフレームワークで、セグメンテーションと検出の両方のタスクに対処する。
これは、ライダーのみの手法のnuScenesセグメンテーションベンチマークにおいて、83.3% mIoUの最先端性能を達成する。
論文 参考訳(メタデータ) (2024-06-11T07:26:54Z) - Few-Shot Learning for Annotation-Efficient Nucleus Instance Segmentation [50.407071700154674]
少数ショット学習(FSL)の観点から、アノテーション効率の良い核インスタンスセグメンテーションを定式化することを提案する。
我々の研究は、計算病理学の隆盛とともに、多くの完全注釈付きデータセットが一般に公開されていることに動機づけられた。
いくつかの公開データセットに対する大規模な実験は、SGFSISが他のアノテーション効率のよい学習ベースラインより優れていることを示している。
論文 参考訳(メタデータ) (2024-02-26T03:49:18Z) - Lidar Panoptic Segmentation and Tracking without Bells and Whistles [48.078270195629415]
ライダーセグメンテーションと追跡のための検出中心ネットワークを提案する。
私たちのネットワークのコアコンポーネントの1つは、オブジェクトインスタンス検出ブランチです。
提案手法を複数の3D/4D LPSベンチマークで評価し,我々のモデルがオープンソースモデル間で新たな最先端性を確立することを確認した。
論文 参考訳(メタデータ) (2023-10-19T04:44:43Z) - AIMS: All-Inclusive Multi-Level Segmentation [93.5041381700744]
視覚領域を3つのレベル(パート、エンティティ、リレーション)に分割するタスクであるAll-Inclusive Multi-Level(AIMS)を提案する。
また、アノテーションの不整合とタスク相関の2つの大きな課題に対処するために、マルチデータセットのマルチタスクトレーニングを通じて統合されたAIMSモデルを構築します。
論文 参考訳(メタデータ) (2023-05-28T16:28:49Z) - 3DMODT: Attention-Guided Affinities for Joint Detection & Tracking in 3D
Point Clouds [95.54285993019843]
本稿では,3次元点雲における複数物体の同時検出と追跡手法を提案する。
本モデルでは,複数のフレームを用いた時間情報を利用してオブジェクトを検出し,一つのネットワーク上で追跡する。
論文 参考訳(メタデータ) (2022-11-01T20:59:38Z) - Semantic Segmentation for Real Point Cloud Scenes via Bilateral
Augmentation and Adaptive Fusion [38.05362492645094]
現実世界の複雑な環境を直感的に捉えることができますが、3Dデータの生の性質のため、機械認識にとって非常に困難です。
我々は、現実に収集された大規模クラウドデータに対して、重要な視覚的タスク、セマンティックセグメンテーションに集中する。
3つのベンチマークで最先端のネットワークと比較することにより,ネットワークの有効性を実証する。
論文 参考訳(メタデータ) (2021-03-12T04:13:20Z) - Improving Point Cloud Semantic Segmentation by Learning 3D Object
Detection [102.62963605429508]
ポイントクラウドセマンティックセグメンテーションは、自動運転において重要な役割を果たす。
現在の3Dセマンティックセグメンテーションネットワークは、よく表現されたクラスに対して優れた性能を発揮する畳み込みアーキテクチャに焦点を当てている。
Aware 3D Semantic Detection (DASS) フレームワークを提案する。
論文 参考訳(メタデータ) (2020-09-22T14:17:40Z) - Self-Prediction for Joint Instance and Semantic Segmentation of Point
Clouds [41.75579185647845]
我々は,3次元のインスタンスと点雲のセマンティックセグメンテーションのための新たな学習手法であるSelf-Predictionを開発した。
本手法は,S3DISとShapeNetのインスタンスセグメンテーション結果と,S3DISとShapeNetのセグメンテーション結果に匹敵するセグメンテーション結果を得る。
論文 参考訳(メタデータ) (2020-07-27T07:58:00Z) - JSENet: Joint Semantic Segmentation and Edge Detection Network for 3D
Point Clouds [37.703770427574476]
本稿では,初めて3次元意味的エッジ検出タスクに取り組む。
本稿では,2つのタスクを共同で行う2ストリーム完全畳み込みネットワークを提案する。
特に,両タスクの性能向上のために,領域情報とエッジ情報を明示的に関連付ける共同改良モジュールを設計する。
論文 参考訳(メタデータ) (2020-07-14T08:00:35Z) - Few-shot 3D Point Cloud Semantic Segmentation [138.80825169240302]
本稿では,新しい注意型マルチプロトタイプトランスダクティブ・ショットポイント・クラウドセマンティックセマンティック・セマンティクス法を提案する。
提案手法は,雲のセマンティックセマンティックセグメンテーション設定の違いによるベースラインに比べて,顕著で一貫した改善を示す。
論文 参考訳(メタデータ) (2020-06-22T08:05:25Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。