論文の概要: SynLiDAR: Learning From Synthetic LiDAR Sequential Point Cloud for
Semantic Segmentation
- arxiv url: http://arxiv.org/abs/2107.05399v1
- Date: Mon, 12 Jul 2021 12:51:08 GMT
- ステータス: 処理完了
- システム内更新日: 2021-07-13 19:46:33.247341
- Title: SynLiDAR: Learning From Synthetic LiDAR Sequential Point Cloud for
Semantic Segmentation
- Title(参考訳): SynLiDAR: セマンティックセグメンテーションのための合成LiDARシーケンスポイントクラウドから学ぶ
- Authors: Aoran Xiao, Jiaxing Huang, Dayan Guan, Fangneng Zhan, Shijian Lu
- Abstract要約: SynLiDARは、正確な幾何学的形状と包括的なセマンティッククラスを備えた合成LiDARポイントクラウドデータセットである。
PCT-Netは、現実世界のポイントクラウドデータとのギャップを狭めることを目的としたポイントクラウド翻訳ネットワークである。
複数のデータ拡張および半教師付きセマンティックセグメンテーションタスクに対する実験は、非常に肯定的な結果を示す。
- 参考スコア(独自算出の注目度): 37.00112978096702
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Transfer learning from synthetic to real data has been proved an effective
way of mitigating data annotation constraints in various computer vision tasks.
However, the developments focused on 2D images but lag far behind for 3D point
clouds due to the lack of large-scale high-quality synthetic point cloud data
and effective transfer methods. We address this issue by collecting SynLiDAR, a
synthetic LiDAR point cloud dataset that contains large-scale point-wise
annotated point cloud with accurate geometric shapes and comprehensive semantic
classes, and designing PCT-Net, a point cloud translation network that aims to
narrow down the gap with real-world point cloud data. For SynLiDAR, we leverage
graphic tools and professionals who construct multiple realistic virtual
environments with rich scene types and layouts where annotated LiDAR points can
be generated automatically. On top of that, PCT-Net disentangles
synthetic-to-real gaps into an appearance component and a sparsity component
and translates SynLiDAR by aligning the two components with real-world data
separately. Extensive experiments over multiple data augmentation and
semi-supervised semantic segmentation tasks show very positive outcomes -
including SynLiDAR can either train better models or reduce real-world
annotated data without sacrificing performance, and PCT-Net translated data
further improve model performance consistently.
- Abstract(参考訳): 合成データから実データへの転送学習は、様々なコンピュータビジョンタスクでデータアノテーション制約を緩和する効果的な方法であることが証明されている。
しかし、大規模な高品質合成ポイントクラウドデータや効果的な転送方法がないため、開発は2dイメージに焦点を絞ったが、3dポイントクラウドではずっと遅れていた。
我々は,高精度な幾何学的形状と包括的意味クラスを備えた大規模ポイントワイドアノテートポイントクラウドを含む合成LiDARポイントクラウドデータセットであるSynLiDARを収集し,実世界のポイントクラウドデータとのギャップを狭めることを目的としたポイントクラウド翻訳ネットワークであるPCT-Netを設計する。
SynLiDARでは,注釈付きLiDARポイントを自動生成可能なリッチなシーンタイプとレイアウトを備えた,複数のリアルな仮想環境を構築するグラフィックツールやプロフェッショナルを活用している。
さらに、PCT-Netは、合成から現実のギャップを外観コンポーネントと空間コンポーネントに切り離し、2つのコンポーネントを現実のデータに別々にアライメントすることでSynLiDARを翻訳する。
複数のデータ拡張と半教師付きセマンティックセグメンテーションタスクに対する大規模な実験では、SynLiDARはより良いモデルをトレーニングするか、パフォーマンスを犠牲にすることなく実世界のアノテートデータを削減できる。
関連論文リスト
- AutoSynth: Learning to Generate 3D Training Data for Object Point Cloud
Registration [69.21282992341007]
Auto Synthは、ポイントクラウド登録のための3Dトレーニングデータを自動的に生成する。
私たちはポイントクラウド登録ネットワークをもっと小さなサロゲートネットワークに置き換え、4056.43$のスピードアップを実現しました。
TUD-L,LINEMOD,Occluded-LINEMODに関する我々の研究結果は,検索データセットでトレーニングされたニューラルネットワークが,広く使用されているModelNet40データセットでトレーニングされたニューラルネットワークよりも一貫してパフォーマンスが向上していることを示す。
論文 参考訳(メタデータ) (2023-09-20T09:29:44Z) - A New Benchmark: On the Utility of Synthetic Data with Blender for Bare
Supervised Learning and Downstream Domain Adaptation [42.2398858786125]
コンピュータビジョンにおけるディープラーニングは、大規模ラベル付きトレーニングデータの価格で大きな成功を収めた。
制御不能なデータ収集プロセスは、望ましくない重複が存在する可能性のある非IIDトレーニングおよびテストデータを生成する。
これを回避するために、ドメインランダム化による3Dレンダリングによる合成データを生成する方法がある。
論文 参考訳(メタデータ) (2023-03-16T09:03:52Z) - Point-Syn2Real: Semi-Supervised Synthetic-to-Real Cross-Domain Learning
for Object Classification in 3D Point Clouds [14.056949618464394]
LiDAR 3Dポイントクラウドデータを用いたオブジェクト分類は、自律運転のような現代的なアプリケーションにとって重要である。
本稿では,ポイントクラウドのマニュアルアノテーションに依存しない半教師付きクロスドメイン学習手法を提案する。
我々は、ポイントクラウド上でのクロスドメイン学習のための新しいベンチマークデータセットであるPoint-Syn2Realを紹介した。
論文 参考訳(メタデータ) (2022-10-31T01:53:51Z) - TRoVE: Transforming Road Scene Datasets into Photorealistic Virtual
Environments [84.6017003787244]
本研究では、シミュレーションデータセットに存在する困難とドメインギャップに対処する合成データ生成パイプラインを提案する。
既存のデータセットからアノテーションや視覚的手がかりを利用すれば、自動マルチモーダルデータ生成が容易になることを示す。
論文 参考訳(メタデータ) (2022-08-16T20:46:08Z) - Dual Adaptive Transformations for Weakly Supervised Point Cloud
Segmentation [78.6612285236938]
弱制御点雲分割のための新しいDATモデル(textbfDual textbfAdaptive textbfTransformations)を提案する。
我々は,大規模S3DISデータセットとScanNet-V2データセットの2つの人気バックボーンを用いたDATモデルの評価を行った。
論文 参考訳(メタデータ) (2022-07-19T05:43:14Z) - STPLS3D: A Large-Scale Synthetic and Real Aerial Photogrammetry 3D Point
Cloud Dataset [6.812704277866377]
本稿では,合成空中測光点雲生成パイプラインを提案する。
仮想ゲームで合成データを生成するのとは異なり、提案したパイプラインは実環境の再構築プロセスをシミュレートする。
我々は、リッチな注釈付き合成3D空中測光点クラウドデータセットを提案する。
論文 参考訳(メタデータ) (2022-03-17T03:50:40Z) - Quasi-Balanced Self-Training on Noise-Aware Synthesis of Object Point
Clouds for Closing Domain Gap [34.590531549797355]
本稿では,CADモデルへのスペックルパターンの投影によるステレオ画像のレンダリングにより,オブジェクト・ポイント・クラウドを物理的にリアルに合成する統合スキームを提案する。
実験により,本手法の有効性,および各モジュールが点クラウド分類における教師なし領域適応に有効であることを検証できる。
論文 参考訳(メタデータ) (2022-03-08T03:44:49Z) - SPU-Net: Self-Supervised Point Cloud Upsampling by Coarse-to-Fine
Reconstruction with Self-Projection Optimization [52.20602782690776]
実際のスキャンされたスパースデータからトレーニング用の大規模なペアリングスパーススキャンポイントセットを得るのは高価で面倒です。
本研究では,SPU-Net と呼ばれる自己監視型点群アップサンプリングネットワークを提案する。
本研究では,合成データと実データの両方について様々な実験を行い,最先端の教師付き手法と同等の性能が得られることを示す。
論文 参考訳(メタデータ) (2020-12-08T14:14:09Z) - ePointDA: An End-to-End Simulation-to-Real Domain Adaptation Framework
for LiDAR Point Cloud Segmentation [111.56730703473411]
LiDARデータ上でディープニューラルネットワーク(DNN)をトレーニングするには、大規模なポイントワイドアノテーションが必要である。
シミュレーション・トゥ・リアル・ドメイン適応(SRDA)は、DNNを無制限の合成データと自動生成されたラベルで訓練する。
ePointDAは、自己教師付きドロップアウトノイズレンダリング、統計不変および空間適応型特徴アライメント、転送可能なセグメンテーション学習の3つのモジュールで構成されている。
論文 参考訳(メタデータ) (2020-09-07T23:46:08Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。