論文の概要: RangeSAM: Leveraging Visual Foundation Models for Range-View repesented LiDAR segmentation
- arxiv url: http://arxiv.org/abs/2509.15886v1
- Date: Fri, 19 Sep 2025 11:33:10 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-09-22 18:18:11.144583
- Title: RangeSAM: Leveraging Visual Foundation Models for Range-View repesented LiDAR segmentation
- Title(参考訳): RangeSAM: Range-View Resented LiDARセグメンテーションのためのVisual Foundation Modelの活用
- Authors: Paul Julius Kühn, Duc Anh Nguyen, Arjan Kuijper, Holger Graf, Dieter Fellner, Saptarshi Neil Sinha,
- Abstract要約: 本稿では,SAM2を3次元セグメンテーションに適応させる最初のレンジビューフレームワークを提案する。
提案手法は,2D中心パイプラインの速度,スケーラビリティ,デプロイメントの単純さを生かしながら,セマンティックKITTI上での競合性能を実現する。
- 参考スコア(独自算出の注目度): 6.513648249086729
- License: http://creativecommons.org/publicdomain/zero/1.0/
- Abstract: Point cloud segmentation is central to autonomous driving and 3D scene understanding. While voxel- and point-based methods dominate recent research due to their compatibility with deep architectures and ability to capture fine-grained geometry, they often incur high computational cost, irregular memory access, and limited real-time efficiency. In contrast, range-view methods, though relatively underexplored - can leverage mature 2D semantic segmentation techniques for fast and accurate predictions. Motivated by the rapid progress in Visual Foundation Models (VFMs) for captioning, zero-shot recognition, and multimodal tasks, we investigate whether SAM2, the current state-of-the-art VFM for segmentation tasks, can serve as a strong backbone for LiDAR point cloud segmentation in the range view. We present , to our knowledge, the first range-view framework that adapts SAM2 to 3D segmentation, coupling efficient 2D feature extraction with standard projection/back-projection to operate on point clouds. To optimize SAM2 for range-view representations, we implement several architectural modifications to the encoder: (1) a novel module that emphasizes horizontal spatial dependencies inherent in LiDAR range images, (2) a customized configuration of tailored to the geometric properties of spherical projections, and (3) an adapted mechanism in the encoder backbone specifically designed to capture the unique spatial patterns and discontinuities present in range-view pseudo-images. Our approach achieves competitive performance on SemanticKITTI while benefiting from the speed, scalability, and deployment simplicity of 2D-centric pipelines. This work highlights the viability of VFMs as general-purpose backbones for 3D perception and opens a path toward unified, foundation-model-driven LiDAR segmentation. Results lets us conclude that range-view segmentation methods using VFMs leads to promising results.
- Abstract(参考訳): ポイントクラウドセグメンテーションは、自動運転と3Dシーン理解の中心である。
ボクセルとポイントベースの手法は、深層アーキテクチャとの互換性と微粒な幾何学を捉える能力によって近年研究が優勢になっているが、計算コスト、不規則なメモリアクセス、リアルタイムの効率の制限といった問題もしばしば生じている。
対照的に、レンジビュー法は比較的探索されていないが、成熟した2次元セマンティックセグメンテーション技術を利用して高速で正確な予測を行うことができる。
キャプション、ゼロショット認識、マルチモーダルタスクのためのVisual Foundation Models (VFM) の急速な進歩により、セグメンテーションタスクの現在最先端のVFMであるSAM2が、レンジビューにおけるLiDARポイントクラウドセグメンテーションの強力なバックボーンとして機能するかどうかを調査する。
SAM2を3次元セグメンテーションに適応させる最初のレンジビューフレームワークについて,標準的なプロジェクション/バックプロジェクションと2次元特徴抽出を結合し,ポイントクラウド上で動作させる。
1)LiDAR領域の画像に固有の水平空間依存性を強調する新しいモジュール,(2)球面投影の幾何学的特性に合わせたカスタマイズされた構成,(3)レンジビュー擬似イメージに特有の空間パターンや不連続性を捉えるように設計されたエンコーダバックボーンの適応機構。
当社のアプローチは,2D中心パイプラインの速度,スケーラビリティ,デプロイメントの単純さを生かしながら,SemanticKITTI上での競合的なパフォーマンスを実現している。
本研究は,3次元知覚のための汎用バックボーンとしてのVFMの実現性を強調し,基礎モデル駆動型LiDARセグメンテーションへの道を開く。
その結果, VFMを用いたレンジビューセグメンテーション手法が有望な結果をもたらすという結論が得られた。
関連論文リスト
- GeoSAM2: Unleashing the Power of SAM2 for 3D Part Segmentation [81.0871900167463]
GeoSAM2は3次元部分分割のためのプロンプト制御可能なフレームワークである。
テクスチャのないオブジェクトが与えられた場合、事前に定義された視点から正規写像とポイントマップを描画する。
部品の選択をガイドするシンプルな2Dプロンプト(クリックやボックス)を受け入れます。
予測されたマスクはオブジェクトにバックプロジェクションされ、ビューに集約される。
論文 参考訳(メタデータ) (2025-08-19T17:58:51Z) - DSU-Net:An Improved U-Net Model Based on DINOv2 and SAM2 with Multi-scale Cross-model Feature Enhancement [7.9006143460465355]
本稿では,DINOv2によるSAM2用マルチスケール機能協調フレームワークを提案する。
コストのかかるトレーニングプロセスを必要とせず、カモフラージュ目標検出や有能なオブジェクト検出といった下流タスクにおいて、既存の最先端のメソオードを超越している。
論文 参考訳(メタデータ) (2025-03-27T06:08:24Z) - PointOcc: Cylindrical Tri-Perspective View for Point-based 3D Semantic
Occupancy Prediction [72.75478398447396]
本稿では,点雲を効果的かつ包括的に表現する円筒型三重対視図を提案する。
また,LiDAR点雲の距離分布を考慮し,円筒座標系における三点ビューを構築した。
プロジェクション中に構造の詳細を維持するために空間群プーリングを使用し、各TPV平面を効率的に処理するために2次元バックボーンを採用する。
論文 参考訳(メタデータ) (2023-08-31T17:57:17Z) - Rethinking Range View Representation for LiDAR Segmentation [66.73116059734788]
「多対一」マッピング、意味的不整合、形状変形は、射程射影からの効果的な学習に対する障害となる可能性がある。
RangeFormerは、ネットワークアーキテクチャ、データ拡張、後処理を含む新しい設計を含む、フルサイクルのフレームワークである。
比較対象のLiDARセマンティックスとパノプティックスセグメンテーションのベンチマークにおいて,初めてレンジビュー法が点,ボクセル,マルチビューフュージョンを越えられることを示す。
論文 参考訳(メタデータ) (2023-03-09T16:13:27Z) - Cylindrical and Asymmetrical 3D Convolution Networks for LiDAR-based
Perception [122.53774221136193]
運転時のLiDARに基づく認識のための最先端の手法は、しばしば点雲を2D空間に投影し、2D畳み込みによって処理する。
自然な対策として、3Dボクセル化と3D畳み込みネットワークを利用する方法がある。
本研究では,3次元幾何学的パターンを探索するために,円筒状分割と非対称な3次元畳み込みネットワークを設計する,屋外LiDARセグメンテーションのための新しいフレームワークを提案する。
論文 参考訳(メタデータ) (2021-09-12T06:25:11Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。