論文の概要: Novel Class Discovery for 3D Point Cloud Semantic Segmentation
- arxiv url: http://arxiv.org/abs/2303.11610v1
- Date: Tue, 21 Mar 2023 06:10:39 GMT
- ステータス: 処理完了
- システム内更新日: 2023-03-22 16:31:22.835454
- Title: Novel Class Discovery for 3D Point Cloud Semantic Segmentation
- Title(参考訳): 3dポイントクラウドセマンティクスセグメンテーションのための新しいクラス発見
- Authors: Luigi Riz, Cristiano Saltori, Elisa Ricci, Fabio Poiesi
- Abstract要約: セマンティックセグメンテーションのための新しいクラス発見(NCD)は、ラベル付き(ベース)クラスからの監督のみを使用して、未ラベル(ノーベル)クラスをセグメンテーションできるモデルを学ぶタスクである。
本論文は,ポイントクラウドデータ解析技術の現状を4方向に進めるものである。
- 参考スコア(独自算出の注目度): 13.024681120553906
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Novel class discovery (NCD) for semantic segmentation is the task of learning
a model that can segment unlabelled (novel) classes using only the supervision
from labelled (base) classes. This problem has recently been pioneered for 2D
image data, but no work exists for 3D point cloud data. In fact, the
assumptions made for 2D are loosely applicable to 3D in this case. This paper
is presented to advance the state of the art on point cloud data analysis in
four directions. Firstly, we address the new problem of NCD for point cloud
semantic segmentation. Secondly, we show that the transposition of the only
existing NCD method for 2D semantic segmentation to 3D data is suboptimal.
Thirdly, we present a new method for NCD based on online clustering that
exploits uncertainty quantification to produce prototypes for pseudo-labelling
the points of the novel classes. Lastly, we introduce a new evaluation protocol
to assess the performance of NCD for point cloud semantic segmentation. We
thoroughly evaluate our method on SemanticKITTI and SemanticPOSS datasets,
showing that it can significantly outperform the baseline. Project page at this
link: https://github.com/LuigiRiz/NOPS.
- Abstract(参考訳): セマンティックセグメンテーションのための新しいクラス発見(NCD)は、ラベル付き(ベース)クラスからの監督のみを使用して、未ラベル(ノーベル)クラスをセグメンテーションできるモデルを学ぶタスクである。
この問題は最近、2D画像データに先駆けて開発されたが、3Dポイント・クラウド・データには問題はない。
実際、この場合、2Dの仮定は3Dにゆるやかに適用できる。
本論文は,ポイントクラウドデータ解析技術の現状を4方向に進めるものである。
まず,ポイントクラウドセマンティックセグメンテーションにおけるNCDの新たな問題に対処する。
第2に,既存の2次元セマンティックセグメンテーションのためのNCD法の3次元データへの変換が最適であることを示す。
第3に、不確実性定量化を利用して、新しいクラスのポイントを疑似ラベル付けするプロトタイプを作成する、オンラインクラスタリングに基づく新しいncd手法を提案する。
最後に,ポイントクラウドセマンティックセグメンテーションにおけるNCDの性能を評価するための新しい評価プロトコルを提案する。
提案手法をSemanticKITTIおよびSemanticPOSSデータセット上で徹底的に評価し,ベースラインを大幅に上回ることを示す。
このリンクのプロジェクトページ: https://github.com/luigiriz/nops。
関連論文リスト
- Bayesian Self-Training for Semi-Supervised 3D Segmentation [59.544558398992386]
3Dセグメンテーションはコンピュータビジョンの中核的な問題である。
完全に教師されたトレーニングを採用するために、3Dポイントクラウドを密にラベル付けすることは、労働集約的で高価です。
半教師付きトレーニングは、ラベル付きデータの小さなセットのみを付与し、より大きなラベル付きデータセットを伴って、より実用的な代替手段を提供する。
論文 参考訳(メタデータ) (2024-09-12T14:54:31Z) - Multi-modality Affinity Inference for Weakly Supervised 3D Semantic
Segmentation [47.81638388980828]
本稿では,マルチモーダルポイント親和性推論モジュールを新たに導入した,シンプルで効果的なシーンレベルの弱教師付きポイントクラウドセグメンテーション法を提案する。
ScanNet と S3DIS のベンチマークでは,最先端の ScanNet と S3DIS のベンチマークでは 4% から 6% の mIoU を達成している。
論文 参考訳(メタデータ) (2023-12-27T14:01:35Z) - Novel class discovery meets foundation models for 3D semantic segmentation [21.879254503403516]
本稿では,ポイントクラウドセマンティックセマンティックセグメンテーションにおけるNCDの新たな課題を紹介する。
2次元セマンティックセグメンテーションのための既存のNCD法を直接3次元データに変換することで、最適以下の結果が得られることを示す。
オンラインクラスタリング,不確実性推定,セマンティック蒸留に基づく新しいNCD手法を提案する。
論文 参考訳(メタデータ) (2023-12-06T09:59:30Z) - Prototype Adaption and Projection for Few- and Zero-shot 3D Point Cloud
Semantic Segmentation [30.18333233940194]
本研究は, 少数ショットとゼロショットの3Dポイントクラウドセマンティックセマンティックセグメンテーションの課題に対処する。
提案手法は,S3DISベンチマークとScanNetベンチマークの2方向1ショット設定により,最先端のアルゴリズムを約7.90%,14.82%上回る。
論文 参考訳(メタデータ) (2023-05-23T17:58:05Z) - Dual Adaptive Transformations for Weakly Supervised Point Cloud
Segmentation [78.6612285236938]
弱制御点雲分割のための新しいDATモデル(textbfDual textbfAdaptive textbfTransformations)を提案する。
我々は,大規模S3DISデータセットとScanNet-V2データセットの2つの人気バックボーンを用いたDATモデルの評価を行った。
論文 参考訳(メタデータ) (2022-07-19T05:43:14Z) - PointAttN: You Only Need Attention for Point Cloud Completion [89.88766317412052]
ポイント・クラウド・コンプリート(Point cloud completion)とは、部分的な3次元ポイント・クラウドから3次元の形状を完成させることである。
そこで我々は,kNNを除去するために,ポイントクラウドをポイント単位に処理する新しいニューラルネットワークを提案する。
提案するフレームワークであるPointAttNはシンプルで簡潔で効果的であり、3次元形状の構造情報を正確に捉えることができる。
論文 参考訳(メタデータ) (2022-03-16T09:20:01Z) - Cylindrical and Asymmetrical 3D Convolution Networks for LiDAR-based
Perception [122.53774221136193]
運転時のLiDARに基づく認識のための最先端の手法は、しばしば点雲を2D空間に投影し、2D畳み込みによって処理する。
自然な対策として、3Dボクセル化と3D畳み込みネットワークを利用する方法がある。
本研究では,3次元幾何学的パターンを探索するために,円筒状分割と非対称な3次元畳み込みネットワークを設計する,屋外LiDARセグメンテーションのための新しいフレームワークを提案する。
論文 参考訳(メタデータ) (2021-09-12T06:25:11Z) - Few-shot 3D Point Cloud Semantic Segmentation [138.80825169240302]
本稿では,新しい注意型マルチプロトタイプトランスダクティブ・ショットポイント・クラウドセマンティックセマンティック・セマンティクス法を提案する。
提案手法は,雲のセマンティックセマンティックセグメンテーション設定の違いによるベースラインに比べて,顕著で一貫した改善を示す。
論文 参考訳(メタデータ) (2020-06-22T08:05:25Z) - Label-Efficient Learning on Point Clouds using Approximate Convex
Decompositions [43.1279121348315]
本稿では,ACD(Adroximate Convex Decompositions)を用いて,点雲表現のラベル効率の学習を行う。
我々は,ACDを用いて3次元点雲表現の学習に優れた自己スーパービジョンを提供することを示す。
論文 参考訳(メタデータ) (2020-03-30T21:44:43Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。