論文の概要: Sparse4D-Radar: An Efficient and Robust Framework for Surround-View 3D Object Detection via 4D Radar-Camera Fusion
- arxiv url: http://arxiv.org/abs/2607.04098v1
- Date: Sun, 05 Jul 2026 03:34:20 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-07-07 22:26:29.829779
- Title: Sparse4D-Radar: An Efficient and Robust Framework for Surround-View 3D Object Detection via 4D Radar-Camera Fusion
- Title(参考訳): Sparse4D-Radar:4次元レーダーカメラフュージョンによる周囲3次元物体検出のための効率的かつロバストなフレームワーク
- Abstract要約: メインストリームの4Dレーダカメラ融合法は、正面視認識のみをサポートし、周囲視センシングのための成熟したソリューションが欠如している。
この研究は、効率的なロバストなサラウンドビューマルチモーダル融合フレームワークであるSparse4D-Radarを提案する。
複雑な運転シーン下では, 7%以上のmAP, 10%以上のODS改善が得られ, 10FPS近くで実行可能であった。
- 参考スコア(独自算出の注目度): 3.986685981087234
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In recent years, 4D imaging radar has gained wide attention in autonomous driving for its robustness against harsh weather and ability to output target velocity. Nevertheless, mainstream 4D radar-camera fusion methods only support front-view perception, lacking mature solutions for surround-view sensing. Directly expanding these pipelines to full 360° coverage introduces excessive computation cost and limits real-world deployment. To tackle these limitations, this work proposes Sparse4D-Radar, an efficient robust surround-view multi-modal fusion framework. We first design a Deformable Fusion module to embed radar-camera features into sparse queries, constructing the lightweight base version Sparse4D-Radar-Base. Two dedicated modules are further introduced to boost localization accuracy and modality stability: Velocity-Consistency Sampling (VCS) refines features via radar velocity cues for motion awareness, and Adaptive Modality Gating (AMG) dynamically adjusts cross-modal fusion weights according to feature confidence. Combining all components, we build Sparse4D-Radar-Acc for high-precision detection demands. Comprehensive experiments on OmniHD-Scenes verify that our approach achieves state-of-the-art surround-view 3D detection performance. Compared with prior arts, our method obtains over 7% mAP and 10% ODS improvements under complex driving scenes while running at nearly 10 FPS, striking a favorable trade-off among detection accuracy, environmental robustness and inference efficiency. Our open-source code is available at https://github.com/Aiuan/Sparse4D-Radar.
- Abstract(参考訳): 近年、4Dイメージングレーダーは、厳しい天候に対する頑丈さと目標速度を出力する能力により、自動運転において大きな注目を集めている。
それにもかかわらず、メインストリームの4Dレーダーカメラ融合法は、周囲の感知のための成熟したソリューションを欠いたフロントビュー認識のみをサポートする。
これらのパイプラインを直接360度カバレッジに拡張することは、過剰な計算コストと実際のデプロイメントの制限をもたらす。
これらの制限に対処するため、この研究は効率的なロバストなサラウンドビューマルチモーダル融合フレームワークであるSparse4D-Radarを提案する。
Deformable Fusionモジュールを設計し、レーダーカメラの機能をスパースクエリに埋め込み、軽量なベースバージョンであるSparse4D-Radar-Baseを構築した。
速度-一貫性サンプリング(VCS)は、運動認識のためのレーダー速度キューを介して特徴を洗練し、適応モードゲーティング(AMG)は、特徴の信頼度に応じて、相互拡散重みを動的に調整する。
すべてのコンポーネントを組み合わせることで、高精度な検出要求のためにSparse4D-Radar-Accを構築します。
OmniHD-Scenesに関する総合的な実験により、我々の手法が最先端のサラウンドビュー3D検出性能を達成することを確認した。
先行技術と比較して, 複雑な運転環境下でのODS改善率は7%以上, ODS改善率は10%以上であり, 検出精度, 環境ロバスト性, 推論効率のトレードオフは良好であった。
オープンソースコードはhttps://github.com/Aiuan/Sparse4D-Radar.comで公開しています。
関連論文リスト
- Stereo 4D Radar for 3D Object Detection: Integrating Geometric Alignment and Absolute Velocity Estimation [5.109810774427172]
ルー4Dレーダー信号は、路面やガードレール、周囲の車両からの散乱や、マルチパスで誘導されるゴースト反射、受信機固有のノイズフロアを含む。
左右のレーダ間の幾何学的相違を利用して物体の絶対速度を推定するステレオ4次元レーダに基づく3次元物体検出フレームワークを提案する。
論文 参考訳(メタデータ) (2026-09-02T13:13:08Z) - 4DR360: State Reasoning for Joint 3D Detection and Occupancy Prediction in 4D Radar-Camera Full-Scene Perception [12.807651354967183]
信頼性の高い自律運転には、密集したセマンティックレイアウトで前景オブジェクトを結合するフルシーンの認識が必要である。
永続的なシーン状態としての意味的占有をモデル化した,360ドル前後のフルシーン知覚のための4次元レーダカメラフレームワークを提案する。
我々は、ManTruckScenesを衛星マップベースで生成された占有ラベルで拡張し、OmniHD-Scenesと組み合わせて、クロスデータセット検出・占有プロトコルを統一する。
論文 参考訳(メタデータ) (2026-07-10T17:26:19Z) - DSERT-RoLL: Robust Multi-Modal Perception for Diverse Driving Conditions with Stereo Event-RGB-Thermal Cameras, 4D Radar, and Dual-LiDAR [66.23438033222963]
DSERT-RoLLは、ステレオイベント、RGB、サーマルカメラを4DレーダーとデュアルLiDARと組み合わせた駆動データセットである。
データセットは正確な2Dおよび3Dバウンディングボックスを提供し、トラックIDとエゴ車両のオドメトリーを提供する。
論文 参考訳(メタデータ) (2026-04-04T11:03:16Z) - Wavelet-based Multi-View Fusion of 4D Radar Tensor and Camera for Robust 3D Object Detection [44.78575994732947]
WRCFormerは、デカップリングされたレーダーキューブのマルチビュー表現を介して、生のレーダーキューブとカメラ入力を融合する新しい3Dオブジェクト検出フレームワークである。
WRCFormerはK-Radarベンチマークで最先端のパフォーマンスを達成し、すべてのシナリオで最高のモデルを約2.4%上回っている。
論文 参考訳(メタデータ) (2025-12-28T15:32:17Z) - TacoDepth: Towards Efficient Radar-Camera Depth Estimation with One-stage Fusion [54.46664104437454]
一段核融合を用いた効率的かつ正確なレーダ・カメラ深度推定モデルであるTacoDepthを提案する。
具体的には、グラフベースのRadar構造抽出器とピラミッドベースのRadar融合モジュールを設計する。
従来の最先端のアプローチと比較して、TacoDepthは深さ精度と処理速度を12.8%、91.8%改善している。
論文 参考訳(メタデータ) (2025-04-16T05:25:04Z) - ZFusion: An Effective Fuser of Camera and 4D Radar for 3D Object Perception in Autonomous Driving [7.037019489455008]
本研究では、4次元レーダと視覚のモダリティを融合した3次元物体検出手法ZFusionを提案する。
FP-DDCAフェイザーはTransformerブロックをパックし、異なるスケールのマルチモーダル機能をインタラクティブに融合する。
実験の結果、ZFusionは興味のある領域で最先端のmAPを達成した。
論文 参考訳(メタデータ) (2025-04-04T13:29:32Z) - RobuRCDet: Enhancing Robustness of Radar-Camera Fusion in Bird's Eye View for 3D Object Detection [68.99784784185019]
暗い照明や悪天候はカメラの性能を低下させる。
レーダーは騒音と位置のあいまいさに悩まされる。
本稿では,BEVの頑健な物体検出モデルであるRobuRCDetを提案する。
論文 参考訳(メタデータ) (2025-02-18T17:17:38Z) - V2X-Radar: A Multi-modal Dataset with 4D Radar for Cooperative Perception [61.58737390490639]
V2X-Radarは、4Dレーダを特徴とする世界初の大規模実世界のマルチモーダルデータセットである。
データセットは20KのLiDARフレーム、40Kのカメライメージ、350Kの注釈付きボックスを含む20Kの4Dレーダデータで構成されている。
様々な研究領域をサポートするために, 協調認識のためのV2X-Radar-C, 路面認識のためのV2X-Radar-I, 単車知覚のためのV2X-Radar-Vを確立した。
論文 参考訳(メタデータ) (2024-11-17T04:59:00Z) - V2X-R: Cooperative LiDAR-4D Radar Fusion with Denoising Diffusion for 3D Object Detection [64.93675471780209]
我々は、LiDAR、カメラ、および4Dレーダを取り入れた初のシミュレーションV2XデータセットであるV2X-Rを提案する。
V2X-Rには12,079のシナリオがあり、LiDARと4Dレーダーポイント雲の37,727フレーム、150,908の画像、170,859の注釈付き3D車両バウンディングボックスがある。
本稿では,3次元物体検出のための新しいコラボレーティブLiDAR-4Dレーダ融合パイプラインを提案し,様々な融合戦略を用いて実装する。
論文 参考訳(メタデータ) (2024-11-13T07:41:47Z) - SMURF: Spatial Multi-Representation Fusion for 3D Object Detection with
4D Imaging Radar [12.842457981088378]
本稿では,単一4次元イメージングレーダを用いた新しい3次元物体検出手法である空間多重表現融合(SMURF)を提案する。
SMURFは、狭角分解能とレーダ信号のマルチパス伝搬による測定精度の低下を緩和する。
The experimental evaluations on View-of-Delft (VoD) and TJ4DRadSet datasets showed the effective and generalization ability of SMURF。
論文 参考訳(メタデータ) (2023-07-20T11:33:46Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。