論文の概要: Sparse Semantic Map-Based Monocular Localization in Traffic Scenes Using
Learned 2D-3D Point-Line Correspondences
- arxiv url: http://arxiv.org/abs/2210.04543v1
- Date: Mon, 10 Oct 2022 10:29:07 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-11 17:56:02.660188
- Title: Sparse Semantic Map-Based Monocular Localization in Traffic Scenes Using
Learned 2D-3D Point-Line Correspondences
- Title(参考訳): 学習2D-3D点線対応を用いた交通現場におけるスパース・セマンティック・マップに基づく単眼位置推定
- Authors: Xingyu Chen, Jianru Xue, and Shanmin Pang
- Abstract要約: クエリー画像が与えられた場合、カメラのポーズが先行マップに対応すると見積もることが目的である。
既存のアプローチは、登録問題を解決するために、機能レベルでの高密度な点記述子に大きく依存している。
本稿では,よく設計されたディープニューラルネットワークを用いて2D-3D登録を行う,スパースセマンティックマップに基づく単眼位置推定法を提案する。
- 参考スコア(独自算出の注目度): 29.419138863851526
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Vision-based localization in a prior map is of crucial importance for
autonomous vehicles. Given a query image, the goal is to estimate the camera
pose corresponding to the prior map, and the key is the registration problem of
camera images within the map. While autonomous vehicles drive on the road under
occlusion (e.g., car, bus, truck) and changing environment appearance (e.g.,
illumination changes, seasonal variation), existing approaches rely heavily on
dense point descriptors at the feature level to solve the registration problem,
entangling features with appearance and occlusion. As a result, they often fail
to estimate the correct poses. To address these issues, we propose a sparse
semantic map-based monocular localization method, which solves 2D-3D
registration via a well-designed deep neural network. Given a sparse semantic
map that consists of simplified elements (e.g., pole lines, traffic sign
midpoints) with multiple semantic labels, the camera pose is then estimated by
learning the corresponding features between the 2D semantic elements from the
image and the 3D elements from the sparse semantic map. The proposed sparse
semantic map-based localization approach is robust against occlusion and
long-term appearance changes in the environments. Extensive experimental
results show that the proposed method outperforms the state-of-the-art
approaches.
- Abstract(参考訳): ビジョンに基づく事前マップのローカライズは、自動運転車にとって非常に重要である。
クエリー画像が与えられた場合、ゴールは先行マップに対応するカメラポーズを推定することであり、キーはマップ内のカメライメージの登録問題である。
自動運転車が閉塞状態(車、バス、トラックなど)や環境の変化(照明の変化、季節変化など)の下で道路を走行している間、既存のアプローチでは、登録問題を解決するために特徴レベルで密集したポイント記述子に大きく依存している。
結果として、しばしば正しいポーズを見積もることに失敗する。
そこで本研究では,高度に設計された深層ニューラルネットワークを用いて2d-3dの登録を解消する,意味的地図に基づくモノクロローカライズ手法を提案する。
複数のセマンティックラベルを持つ簡易な要素(例えば、ポール線、交通標識ミッドポイント)からなるスパースセマンティックマップを与えられた後、スパースセマンティックマップから画像から2Dセマンティックエレメントと3Dエレメントの対応する特徴を学習することにより、カメラポーズを推定する。
提案したスパース・セマンティック・マップに基づくローカライズ・アプローチは,環境の排他的・長期的変化に対して堅牢である。
その結果,提案手法は最先端の手法よりも優れていた。
関連論文リスト
- Neural Semantic Map-Learning for Autonomous Vehicles [85.8425492858912]
本稿では,道路環境のコヒーレントな地図を作成するために,車両群から収集した局所部分写像を中心インスタンスに融合するマッピングシステムを提案する。
本手法は,シーン特異的なニューラルサイン距離場を用いて,雑音と不完全局所部分写像を併用する。
我々は,記憶効率の高いスパース機能グリッドを活用して大規模にスケールし,シーン再構築における不確実性をモデル化するための信頼スコアを導入する。
論文 参考訳(メタデータ) (2024-10-10T10:10:03Z) - Learning to Produce Semi-dense Correspondences for Visual Localization [11.415451542216559]
本研究は,夜間シナリオ,悪天候,季節変化などの要求条件下で視覚的局所化を行うことの課題に対処する。
本稿では,高密度なキーポイントマッチングに基づいて,信頼性の高い半高密度2D-3Dマッチングポイントを抽出する手法を提案する。
ネットワークは幾何学的および視覚的な手がかりを用いて、観測されたキーポイントから観測されていないキーポイントの3D座標を効果的に推測する。
論文 参考訳(メタデータ) (2024-02-13T10:40:10Z) - Neural Semantic Surface Maps [52.61017226479506]
本稿では,2つの属とゼロの形状の地図を自動計算する手法を提案する。
提案手法は,手動のアノテーションや3Dトレーニングデータ要求を排除し,意味的表面-表面マップを生成する。
論文 参考訳(メタデータ) (2023-09-09T16:21:56Z) - Satellite Image Based Cross-view Localization for Autonomous Vehicle [59.72040418584396]
本稿では,市販の高精細衛星画像を使用可能な地図として利用することにより,良好な精度でクロスビュー車両のローカライゼーションを実現することができることを示す。
本手法はKITTIとFord Multi-AVの季節データセットを地上ビューとして,Google Mapsを衛星ビューとして検証した。
論文 参考訳(メタデータ) (2022-07-27T13:16:39Z) - Image-to-Lidar Self-Supervised Distillation for Autonomous Driving Data [80.14669385741202]
本稿では,自律運転データに適した3次元知覚モデルのための自己教師付き事前学習手法を提案する。
我々は、自動走行装置における同期・校正画像とLidarセンサーの可用性を活用している。
私たちのメソッドは、ポイントクラウドや画像アノテーションを一切必要としません。
論文 参考訳(メタデータ) (2022-03-30T12:40:30Z) - Semantic Image Alignment for Vehicle Localization [111.59616433224662]
単眼カメラからのセマンティックセグメンテーションを用いた高密度セマンティックマップにおける車両位置推定手法を提案する。
既存の視覚的ローカライゼーションアプローチとは対照的に、システムは追加のキーポイント機能、手作りのローカライゼーションランドマーク抽出器、高価なLiDARセンサーを必要としない。
論文 参考訳(メタデータ) (2021-10-08T14:40:15Z) - Coarse-to-fine Semantic Localization with HD Map for Autonomous Driving
in Structural Scenes [1.1024591739346292]
カメラを主センサとする自動運転のためのHDマップを用いたコスト効率の高い車両位置決めシステムを提案する。
視覚的セマンティクスをHDマップのランドマークにマップするデータアソシエーション問題として視覚に基づくローカライゼーションを定式化する。
本手法を2つのデータセット上で評価し,提案手法が異なる運転シナリオにおいて有望なローカライゼーション結果をもたらすことを示す。
論文 参考訳(メタデータ) (2021-07-06T11:58:55Z) - P2-Net: Joint Description and Detection of Local Features for Pixel and
Point Matching [78.18641868402901]
この研究は、2D画像と3D点雲の微粒な対応を確立するための取り組みである。
画素領域と点領域の固有情報変動を緩和するために,新しい損失関数と組み合わせた超広帯域受信機構を設計した。
論文 参考訳(メタデータ) (2021-03-01T14:59:40Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。