論文の概要: Improving Point Cloud Semantic Segmentation by Learning 3D Object
Detection
- arxiv url: http://arxiv.org/abs/2009.10569v3
- Date: Sat, 7 Nov 2020 15:58:19 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-15 22:43:03.573923
- Title: Improving Point Cloud Semantic Segmentation by Learning 3D Object
Detection
- Title(参考訳): 3次元物体検出学習による点クラウド意味セグメンテーションの改善
- Authors: Ozan Unal, Luc Van Gool, Dengxin Dai
- Abstract要約: ポイントクラウドセマンティックセグメンテーションは、自動運転において重要な役割を果たす。
現在の3Dセマンティックセグメンテーションネットワークは、よく表現されたクラスに対して優れた性能を発揮する畳み込みアーキテクチャに焦点を当てている。
Aware 3D Semantic Detection (DASS) フレームワークを提案する。
- 参考スコア(独自算出の注目度): 102.62963605429508
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Point cloud semantic segmentation plays an essential role in autonomous
driving, providing vital information about drivable surfaces and nearby objects
that can aid higher level tasks such as path planning and collision avoidance.
While current 3D semantic segmentation networks focus on convolutional
architectures that perform great for well represented classes, they show a
significant drop in performance for underrepresented classes that share similar
geometric features. We propose a novel Detection Aware 3D Semantic Segmentation
(DASS) framework that explicitly leverages localization features from an
auxiliary 3D object detection task. By utilizing multitask training, the shared
feature representation of the network is guided to be aware of per class
detection features that aid tackling the differentiation of geometrically
similar classes. We additionally provide a pipeline that uses DASS to generate
high recall proposals for existing 2-stage detectors and demonstrate that the
added supervisory signal can be used to improve 3D orientation estimation
capabilities. Extensive experiments on both the SemanticKITTI and KITTI object
datasets show that DASS can improve 3D semantic segmentation results of
geometrically similar classes up to 37.8% IoU in image FOV while maintaining
high precision bird's-eye view (BEV) detection results.
- Abstract(参考訳): ポイントクラウドセマンティックセグメンテーションは、自律運転において不可欠な役割を担い、乾燥可能な表面や、経路計画や衝突回避といった高度なタスクを支援する近くの物体について重要な情報を提供する。
現在の3dセマンティクスセグメンテーションネットワークは、よく表現されたクラスでよく機能する畳み込みアーキテクチャにフォーカスしているが、同様の幾何学的特徴を持つ未表現のクラスではパフォーマンスが大幅に低下している。
本稿では,補助的な3次元オブジェクト検出タスクから局所化機能を明示的に活用する,DASS(Decepting Aware 3D Semantic Segmentation)フレームワークを提案する。
マルチタスク学習を利用することで、ネットワークの共有特徴表現は、幾何学的に類似したクラスの分化に取り組むのに役立つクラス検出機能ごとの認識をガイドする。
さらに,DASSを用いて既存の2段検出器の高精度なリコール提案を発生させるパイプラインを提供し,付加したオーバシィ信号が3次元配向推定能力の向上に有効であることを示す。
SemanticKITTIとKITTIのオブジェクトデータセットの大規模な実験により、DASSは画像FOVにおいて37.8%のIoUまで幾何学的に類似したクラスの3Dセマンティックセマンティックセグメンテーション結果を改善することができ、高精度の鳥眼ビュー(BEV)検出結果を維持することができる。
関連論文リスト
- Semi-Weakly Supervised Object Kinematic Motion Prediction [56.282759127180306]
3Dオブジェクトが与えられた場合、運動予測は移動部と対応する運動パラメータを識別することを目的としている。
階層的部分分割と移動部パラメータのマップを学習するグラフニューラルネットワークを提案する。
ネットワーク予測は、擬似ラベル付き移動情報を持つ大規模な3Dオブジェクトを生成する。
論文 参考訳(メタデータ) (2023-03-31T02:37:36Z) - CLR-GAM: Contrastive Point Cloud Learning with Guided Augmentation and
Feature Mapping [12.679625717350113]
本稿では、効率的な動的探索戦略のためのガイド拡張(GA)を備えた対照的な学習ベースのフレームワークであるCLR-GAMを提案する。
提案手法がシミュレーションおよび実世界の3Dポイントクラウドデータセット上で最先端のパフォーマンスを実現することを実証的に実証した。
論文 参考訳(メタデータ) (2023-02-28T04:38:52Z) - AOP-Net: All-in-One Perception Network for Joint LiDAR-based 3D Object
Detection and Panoptic Segmentation [9.513467995188634]
AOP-NetはLiDARベースのマルチタスクフレームワークで、3Dオブジェクトの検出とパノプティクスのセグメンテーションを組み合わせたものである。
AOP-Netは、nuScenesベンチマークにおける3Dオブジェクト検出とパノプティクスセグメンテーションの両タスクについて、最先端のパフォーマンスを達成している。
論文 参考訳(メタデータ) (2023-02-02T05:31:53Z) - AGO-Net: Association-Guided 3D Point Cloud Object Detection Network [86.10213302724085]
ドメイン適応によるオブジェクトの無傷な特徴を関連付ける新しい3D検出フレームワークを提案する。
我々は,KITTIの3D検出ベンチマークにおいて,精度と速度の両面で最新の性能を実現する。
論文 参考訳(メタデータ) (2022-08-24T16:54:38Z) - Structure Aware and Class Balanced 3D Object Detection on nuScenes
Dataset [0.0]
NuTonomyのnuScenesデータセットは、KITTIのような一般的なデータセットを大きく拡張している。
このモデルの局所化精度は、ダウンスケールされた特徴写像における空間情報の損失に影響される。
本稿では,3次元点雲の構造情報をフル活用した補助ネットワークを設計することで,CBGSモデルの性能を向上させることを提案する。
論文 参考訳(メタデータ) (2022-05-25T06:18:49Z) - SASA: Semantics-Augmented Set Abstraction for Point-based 3D Object
Detection [78.90102636266276]
SASA(Semantics-Augmented Set Abstraction)と呼ばれる新しい集合抽象化手法を提案する。
そこで本研究では, 推定点前景スコアに基づいて, より重要な前景点の維持を支援するセマンティックス誘導点サンプリングアルゴリズムを提案する。
実際には、SASAは、前景オブジェクトに関連する貴重な点を識別し、ポイントベースの3D検出のための特徴学習を改善するのに有効である。
論文 参考訳(メタデータ) (2022-01-06T08:54:47Z) - Background-Aware 3D Point Cloud Segmentationwith Dynamic Point Feature
Aggregation [12.093182949686781]
DPFA-Net(Dynamic Point Feature Aggregation Network)と呼ばれる新しい3Dポイント・クラウド・ラーニング・ネットワークを提案する。
DPFA-Netにはセマンティックセグメンテーションと3Dポイントクラウドの分類のための2つのバリエーションがある。
S3DISデータセットのセマンティックセグメンテーションのための、最先端の全体的な精度スコアを達成する。
論文 参考訳(メタデータ) (2021-11-14T05:46:05Z) - Improving 3D Object Detection with Channel-wise Transformer [58.668922561622466]
我々は手作りの最小限の設計で2段階の3Dオブジェクト検出フレームワーク(CT3D)を提案する。
CT3Dは、提案対応の埋め込みとチャンネルワイドコンテキストアグリゲーションを同時に行う。
これはKITTIテスト3D検出ベンチマークで中等車カテゴリーで81.77%のAPを達成した。
論文 参考訳(メタデータ) (2021-08-23T02:03:40Z) - 3D Spatial Recognition without Spatially Labeled 3D [127.6254240158249]
Weakly-supervised framework for Point cloud Recognitionを紹介する。
We show that WyPR can detected and segment objects in point cloud data without access any space labels at training time。
論文 参考訳(メタデータ) (2021-05-13T17:58:07Z) - Pointwise Attention-Based Atrous Convolutional Neural Networks [15.499267533387039]
多数の点を効率的に扱うために,注目度に基づくアトラス畳み込みニューラルネットワークアーキテクチャを提案する。
提案モデルは,3次元セマンティックセグメンテーションタスクにおいて,最も重要な2つの3Dポイントクラウドデータセット上で評価されている。
精度の面では最先端モデルと比較して妥当な性能を達成し、パラメータの数ははるかに少ない。
論文 参考訳(メタデータ) (2019-12-27T13:12:58Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。