論文の概要: Camera and LiDAR BEV Fusion for Cooperative 3D Object Detection on TUMTraf V2X
- arxiv url: http://arxiv.org/abs/2606.12981v1
- Date: Thu, 11 Jun 2026 07:14:10 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-06-12 15:55:27.633225
- Title: Camera and LiDAR BEV Fusion for Cooperative 3D Object Detection on TUMTraf V2X
- Title(参考訳): TUMTraf V2Xを用いた3次元物体の協調検出のためのカメラとLiDAR BEV融合
- Authors: Muhammad Shahbaz, Shaurya Agarwal,
- Abstract要約: 本稿では、TUMTraf V2XによるDriveX 2026チャレンジの3Dオブジェクト検出トラックのために開発されたカメラとLiDAR融合検出器について述べる。
この検出器は3つの道路カメラを融合させ、インフラと車両の点の雲を共有の鳥の目視空間で撮影する。
モデルは、公開ベータのCodaテストスプリットで0.85の3D mAPに達する。
- 参考スコア(独自算出の注目度): 3.1508266388327324
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: We describe a Camera and LiDAR fusion detector developed for the TUMTraf V2X cooperative 3D object detection track of the DriveX 2026 challenge. The detector fuses three roadside cameras with a fused infrastructure-plus-vehicle point cloud in a shared bird's-eye-view space and predicts boxes through a CenterPoint-style head with a generalized IoU regression loss and an IoU quality re-ranking head. Trained on the provided train and validation splits, the model reaches a 3D mAP of 0.85 on the public Codabench test split. While iterating on the system, we observed that 44 of the 50 test frames are also present in the released train (40) and validation (4) splits with their labels. We therefore conducted two additional studies to quantify how this overlap affects the final score: (1) a finetuning run that oversamples the 44 overlapping frames, reaching 0.89 mAP, and (2) a post-processing run that replaces predictions on those frames with the released ground truth, reaching 0.99 mAP (uploaded to our Codabench account for testing but not published on the leaderboard). All three configurations and their per-class results are reported.
- Abstract(参考訳): 本稿では、TUMTraf V2XによるDriveX 2026チャレンジの3Dオブジェクト検出トラックのために開発されたカメラとLiDAR融合検出器について述べる。
検出器は、3つの路面カメラを融合したインフラストラクチャ+車両用点雲を共有鳥視空間に融合させ、一般化されたIoU回帰損失とIoU品質再ランクヘッドを備えたCenterPointスタイルのヘッドを介してボックスを予測する。
提供された列車とバリデーションの分割で訓練されたモデルは、コダベンチ試験の分割で0.85の3D mAPに達する。
その結果,50フレーム中44フレームが解放された列車 (40) に存在し, 検証(4) がラベルで分割されていることがわかった。
1) 44の重なり合うフレームをオーバーサンプリングし,0.89mAPに達する微調整実行,(2) それらのフレーム上の予測を放出された真実に置き換えた後処理実行, 0.99mAP(テストのためにCodabenchアカウントにアップロードされるが,リーダボードには公開されない)。
3つの構成とそのクラス毎の結果が報告されている。
関連論文リスト
- V2X-Radar: A Multi-modal Dataset with 4D Radar for Cooperative Perception [61.58737390490639]
V2X-Radarは、4Dレーダを特徴とする世界初の大規模実世界のマルチモーダルデータセットである。
データセットは20KのLiDARフレーム、40Kのカメライメージ、350Kの注釈付きボックスを含む20Kの4Dレーダデータで構成されている。
様々な研究領域をサポートするために, 協調認識のためのV2X-Radar-C, 路面認識のためのV2X-Radar-I, 単車知覚のためのV2X-Radar-Vを確立した。
論文 参考訳(メタデータ) (2024-11-17T04:59:00Z) - V2X-R: Cooperative LiDAR-4D Radar Fusion with Denoising Diffusion for 3D Object Detection [64.93675471780209]
我々は、LiDAR、カメラ、および4Dレーダを取り入れた初のシミュレーションV2XデータセットであるV2X-Rを提案する。
V2X-Rには12,079のシナリオがあり、LiDARと4Dレーダーポイント雲の37,727フレーム、150,908の画像、170,859の注釈付き3D車両バウンディングボックスがある。
本稿では,3次元物体検出のための新しいコラボレーティブLiDAR-4Dレーダ融合パイプラインを提案し,様々な融合戦略を用いて実装する。
論文 参考訳(メタデータ) (2024-11-13T07:41:47Z) - TUMTraf V2X Cooperative Perception Dataset [20.907021313266128]
協調型マルチモーダル融合モデルであるCoopDet3Dと認識データセットであるTUMTraf-V2Xを提案する。
私たちのデータセットには2,000のラベル付きポイントクラウドと5000のラベル付きイメージが5つの道端と4つのオンボードセンサーから含まれています。
当社のCoopDet3Dカメラ-LiDAR融合モデルでは,車載カメラ-LiDAR融合モデルと比較して+14.363D mAPの増加が達成されている。
論文 参考訳(メタデータ) (2024-03-02T21:29:04Z) - Collaboration Helps Camera Overtake LiDAR in 3D Detection [49.58433319402405]
カメラのみの3D検出は、LiDARベースの検出システムと比較して、オブジェクトを3D空間にローカライズするための簡単なソリューションを提供する。
提案するコラボレーティブカメラのみの3D検出(CoCa3D)により,エージェントは通信を通じて相互に補完情報を共有できる。
その結果、CoCa3Dは従来のSOTA性能をDAIR-V2Xで44.21%改善し、OPV2V+で30.60%、AP@70でCoPerception-UAVs+で12.59%向上した。
論文 参考訳(メタデータ) (2023-03-23T03:50:41Z) - Disentangle Your Dense Object Detector [82.22771433419727]
深層学習に基づく高密度物体検出器はここ数年で大きな成功を収め、ビデオ理解などのマルチメディアアプリケーションにも応用されてきた。
しかし、現在の高密度検出器の訓練パイプラインは、保持できない多くの接続に妥協されている。
そこで本研究では, 簡易かつ効果的な遠心分離機構を設計し, 現在の最先端検出器に統合するDED(Disentangled Dense Object Detector)を提案する。
論文 参考訳(メタデータ) (2021-07-07T00:52:16Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。