論文の概要: Towards a Robust Sensor Fusion Step for 3D Object Detection on Corrupted
Data
- arxiv url: http://arxiv.org/abs/2306.07344v1
- Date: Mon, 12 Jun 2023 18:06:29 GMT
- ステータス: 処理完了
- システム内更新日: 2023-06-14 16:18:43.934972
- Title: Towards a Robust Sensor Fusion Step for 3D Object Detection on Corrupted
Data
- Title(参考訳): 破壊データを用いた3次元物体検出のためのロバストセンサ融合
- Authors: Maciej K. Wozniak, Viktor Karefjards, Marko Thiel, Patric Jensfelt
- Abstract要約: この研究は、データの破損に対処し、3Dオブジェクト検出のためのセンサ融合をより堅牢にする新しい融合ステップを示す。
提案手法は,通常のデータに対する最先端手法と同等に動作し,不整合データに対して性能を向上することを示す。
- 参考スコア(独自算出の注目度): 4.3012765978447565
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Multimodal sensor fusion methods for 3D object detection have been
revolutionizing the autonomous driving research field. Nevertheless, most of
these methods heavily rely on dense LiDAR data and accurately calibrated
sensors which is often not the case in real-world scenarios. Data from LiDAR
and cameras often come misaligned due to the miscalibration, decalibration, or
different frequencies of the sensors. Additionally, some parts of the LiDAR
data may be occluded and parts of the data may be missing due to hardware
malfunction or weather conditions. This work presents a novel fusion step that
addresses data corruptions and makes sensor fusion for 3D object detection more
robust. Through extensive experiments, we demonstrate that our method performs
on par with state-of-the-art approaches on normal data and outperforms them on
misaligned data.
- Abstract(参考訳): 3次元物体検出のためのマルチモーダルセンサ融合法は、自動運転研究分野に革命をもたらした。
しかしながら、これらの手法のほとんどは、密集したLiDARデータと正確な校正されたセンサーに大きく依存している。
LiDARとカメラのデータはしばしば、センサーの誤校正、校正、あるいは異なる周波数のために不一致となる。
加えて、LiDARデータの一部が閉鎖され、ハードウェアの故障や気象条件のためにデータの一部が失われる可能性がある。
この研究は、データの破損に対処し、3Dオブジェクト検出のためのセンサ融合をより堅牢にする新しい融合ステップを示す。
広範にわたる実験により,本手法は通常のデータに対する最先端手法と同等に動作し,不整合データに対して性能を向上することを示した。
関連論文リスト
- Better Monocular 3D Detectors with LiDAR from the Past [64.6759926054061]
カメラベースの3D検出器は、画像の奥行きのあいまいさのため、LiDARベースの検出器に比べて性能が劣ることが多い。
本研究では,未ラベルの歴史的LiDARデータを活用することにより,単分子3D検出器の改良を図る。
複数の最先端モデルやデータセットに対して,9.66ミリ秒の追加レイテンシとストレージコストの低い,一貫性と大幅なパフォーマンス向上を示す。
論文 参考訳(メタデータ) (2024-04-08T01:38:43Z) - MultiCorrupt: A Multi-Modal Robustness Dataset and Benchmark of LiDAR-Camera Fusion for 3D Object Detection [5.462358595564476]
自動走行のためのマルチモーダル3Dオブジェクト検出モデルは、nuScenesのようなコンピュータビジョンベンチマークでは例外的な性能を示した。
しかし、密集したLiDAR点雲や精密に校正されたセンサーアレイへの依存は、現実世界のアプリケーションに課題をもたらす。
我々は,10種類の汚職に対してマルチモーダル3Dオブジェクト検出器の堅牢性を評価するためのベンチマークであるMultiCorruptを紹介する。
論文 参考訳(メタデータ) (2024-02-18T18:56:13Z) - Multi-Modal 3D Object Detection by Box Matching [109.43430123791684]
マルチモーダル3次元検出のためのボックスマッチング(FBMNet)による新しいフュージョンネットワークを提案する。
3Dオブジェクトと2Dオブジェクトの提案を学習することで、ROI特徴を組み合わせることで、検出のための融合を効果的に行うことができる。
論文 参考訳(メタデータ) (2023-05-12T18:08:51Z) - On the Importance of Accurate Geometry Data for Dense 3D Vision Tasks [61.74608497496841]
不正確または破損したデータのトレーニングは、モデルバイアスとハマーズ一般化能力を誘導する。
本稿では,深度推定と再構成における高密度3次元視覚課題に対するセンサ誤差の影響について検討する。
論文 参考訳(メタデータ) (2023-03-26T22:32:44Z) - Benchmarking the Robustness of LiDAR-Camera Fusion for 3D Object
Detection [58.81316192862618]
自律運転における3D知覚のための2つの重要なセンサーは、カメラとLiDARである。
これら2つのモダリティを融合させることで、3次元知覚モデルの性能を大幅に向上させることができる。
我々は、最先端の核融合法を初めてベンチマークした。
論文 参考訳(メタデータ) (2022-05-30T09:35:37Z) - Learning Online Multi-Sensor Depth Fusion [100.84519175539378]
SenFuNetは、センサ固有のノイズと外れ値統計を学習するディープフュージョンアプローチである。
実世界のCoRBSとScene3Dデータセットで様々なセンサーの組み合わせで実験を行う。
論文 参考訳(メタデータ) (2022-04-07T10:45:32Z) - 3D-VField: Learning to Adversarially Deform Point Clouds for Robust 3D
Object Detection [111.32054128362427]
安全クリティカルな環境では、アウト・オブ・ディストリビューションとロングテールサンプルの堅牢性は、危険な問題を回避するのに不可欠である。
トレーニング中の変形点雲を考慮した3次元物体検出器の領域外データへの一般化を著しく改善する。
我々は、リアルに損傷を受けた稀な車の合成データセットであるCrashDを提案し、共有する。
論文 参考訳(メタデータ) (2021-12-09T08:50:54Z) - Frustum Fusion: Pseudo-LiDAR and LiDAR Fusion for 3D Detection [0.0]
本稿では,立体対から得られる高精度な点雲と,密度が高いが精度の低い点雲を結合する新しいデータ融合アルゴリズムを提案する。
我々は複数の3次元物体検出法を訓練し、核融合戦略が検出器の性能を継続的に改善することを示す。
論文 参考訳(メタデータ) (2021-11-08T19:29:59Z) - Radar Voxel Fusion for 3D Object Detection [0.0]
本稿では,3次元物体検出のための低レベルセンサ融合ネットワークを開発する。
レーダーセンサーの融合は、雨や夜景のような裂け目状態において特に有益である。
論文 参考訳(メタデータ) (2021-06-26T20:34:12Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。