論文の概要: Physics and semantic informed multi-sensor calibration via optimization
theory and self-supervised learning
- arxiv url: http://arxiv.org/abs/2206.02856v1
- Date: Mon, 6 Jun 2022 19:03:42 GMT
- ステータス: 処理完了
- システム内更新日: 2022-06-08 15:33:44.212287
- Title: Physics and semantic informed multi-sensor calibration via optimization
theory and self-supervised learning
- Title(参考訳): 最適化理論と自己教師付き学習による物理と意味的インフォームドマルチセンサキャリブレーション
- Authors: Shmuel Y. Hayoun, Meir Halachmi, Doron Serebro, Kfir Twizer, Elinor
Medezinski, Liron Korkidi, Moshik Cohen and Itai Orr
- Abstract要約: カメラライダー・レーダートリオの連成校正に対する総合的なアプローチを提案する。
オンライン直接最適化によるコスト最小化フレームワークと,自己教師型学習(SSL)による2つのターゲットレスキャリブレーション手法を提案する。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: Achieving safe and reliable autonomous driving relies greatly on the ability
to achieve an accurate and robust perception system; however, this cannot be
fully realized without precisely calibrated sensors. Environmental and
operational conditions as well as improper maintenance can produce calibration
errors inhibiting sensor fusion and, consequently, degrading the perception
performance. Traditionally, sensor calibration is performed in a controlled
environment with one or more known targets. Such a procedure can only be
carried out in between drives and requires manual operation; a tedious task if
needed to be conducted on a regular basis. This sparked a recent interest in
online targetless methods, capable of yielding a set of geometric
transformations based on perceived environmental features, however, the
required redundancy in sensing modalities makes this task even more
challenging, as the features captured by each modality and their
distinctiveness may vary. We present a holistic approach to performing joint
calibration of a camera-lidar-radar trio. Leveraging prior knowledge and
physical properties of these sensing modalities together with semantic
information, we propose two targetless calibration methods within a cost
minimization framework once via direct online optimization, and second via
self-supervised learning (SSL).
- Abstract(参考訳): 安全で信頼性の高い自動運転を実現するには、正確で堅牢な認識システムを実現する能力に大きく依存するが、正確な校正センサーがなければ完全には実現できない。
環境および運用条件および不適切なメンテナンスは、センサ融合を阻害する校正誤差を発生させ、その結果、知覚性能を低下させる。
従来、センサキャリブレーションは1つ以上の既知の目標を持つ制御環境で行われる。
このような手順はドライブ間でのみ実行でき、手動操作を必要とする。
このことが近年のオンラインターゲットレス手法への関心を喚起し、知覚された環境特徴に基づいて幾何変換を生成できるようになったが、各モダリティによって捉えられる特徴やその特異性が異なるため、知覚的モダリティに必要とされる冗長性がさらに困難になる。
カメラライダー・レーダートリオの連成校正に対する総合的なアプローチを提案する。
これらのセンシングモダリティの事前知識と物理特性を意味情報とともに活用し,直接オンライン最適化によるコスト最小化フレームワークにおける2つの目標のないキャリブレーション手法と,ssl(self-supervised learning)による2つの手法を提案する。
関連論文リスト
- What Really Matters for Learning-based LiDAR-Camera Calibration [50.2608502974106]
本稿では,学習に基づくLiDAR-Cameraキャリブレーションの開発を再考する。
我々は、広く使われているデータ生成パイプラインによる回帰ベースの手法の限界を識別する。
また,入力データ形式と前処理操作がネットワーク性能に与える影響についても検討する。
論文 参考訳(メタデータ) (2025-01-28T14:12:32Z) - Uncertainty-Aware Online Extrinsic Calibration: A Conformal Prediction Approach [4.683612295430957]
我々はモンテカルロ・ドロップアウトとコンフォーマル予測を組み合わせた不確実性認識をオンラインキャリブレーションに統合する最初のアプローチを提案する。
本研究では,様々な視覚センサの種類にまたがって有効性を示し,測定値を用いて測定を行い,間隔の効率と信頼性を評価する。
動的環境におけるセンサ融合の堅牢性を大幅に向上させることができるキャリブレーション推定の信頼性に関する知見を提供する。
論文 参考訳(メタデータ) (2025-01-12T17:24:51Z) - Kalib: Markerless Hand-Eye Calibration with Keypoint Tracking [52.4190876409222]
ハンドアイキャリブレーションでは、カメラとロボット間の変換を推定する。
ディープラーニングの最近の進歩は、マーカーレス技術を提供するが、それらは課題を提示している。
自動的かつ普遍的なマーカーレスハンドアイキャリブレーションパイプラインであるKalibを提案する。
論文 参考訳(メタデータ) (2024-08-20T06:03:40Z) - A re-calibration method for object detection with multi-modal alignment bias in autonomous driving [7.601405124830806]
自律走行における多モード物体検出は、異なるセンサからの補完情報を融合させることにより、大きなブレークスルーを達成した。
実際には、キャリブレーション行列は車両が工場を出る際に固定されるが、振動、バンプ、データラグはキャリブレーションバイアスを引き起こす可能性がある。
我々は,SOTA検出方式EPNet++の実験を行い,キャリブレーションの偏りをわずかに示し,性能を著しく低下させることを示した。
論文 参考訳(メタデータ) (2024-05-27T05:46:37Z) - Joint Spatial-Temporal Calibration for Camera and Global Pose Sensor [0.4143603294943439]
ロボット工学において、モーションキャプチャシステムはローカライズアルゴリズムの精度を測定するために広く利用されている。
これらの機能は、カメラとグローバルポーズセンサーの間で正確で信頼性の高い時空間キャリブレーションパラメータを必要とする。
本研究では,これらのキャリブレーションパラメータを推定する新しい2つの手法を提案する。
論文 参考訳(メタデータ) (2024-03-01T20:56:14Z) - SOAC: Spatio-Temporal Overlap-Aware Multi-Sensor Calibration using Neural Radiance Fields [10.958143040692141]
自律運転のような急速に進化する領域では、動作精度と安定性を確保するために、異なるモードの複数のセンサーを使用することが不可欠である。
各センサが提供した情報を単一の共通フレームで正確に活用するためには、これらのセンサを正確に校正することが不可欠である。
我々は、共通の表現において異なるモダリティを表現するために、ニューラルラジアンス場(Neural Radiance Fields)の能力を利用する。
論文 参考訳(メタデータ) (2023-11-27T13:25:47Z) - EasyHeC: Accurate and Automatic Hand-eye Calibration via Differentiable
Rendering and Space Exploration [49.90228618894857]
我々は、マーカーレスでホワイトボックスであり、より優れた精度とロバスト性を提供するEasyHeCと呼ばれる手眼校正の新しいアプローチを導入する。
我々は,2つの重要な技術 – レンダリングベースのカメラポーズの最適化と整合性に基づく共同空間探索 – を利用することを提案する。
本評価は,合成および実世界のデータセットにおいて優れた性能を示す。
論文 参考訳(メタデータ) (2023-05-02T03:49:54Z) - An automatic differentiation system for the age of differential privacy [65.35244647521989]
Tritiumは、微分プライベート(DP)機械学習(ML)のための自動微分ベース感度分析フレームワークである
我々は、微分プライベート(DP)機械学習(ML)のための自動微分に基づく感度分析フレームワークTritiumを紹介する。
論文 参考訳(メタデータ) (2021-09-22T08:07:42Z) - Real-time detection of uncalibrated sensors using Neural Networks [62.997667081978825]
オンライン学習に基づく温度・湿度・圧力センサの非校正検出装置を開発した。
このソリューションはニューラルネットワークをメインコンポーネントとして統合し、校正条件下でのセンサーの動作から学習する。
その結果, 提案手法は, 偏差値0.25度, 1% RH, 1.5Paの偏差をそれぞれ検出できることがわかった。
論文 参考訳(メタデータ) (2021-02-02T15:44:39Z) - Automatic Extrinsic Calibration Method for LiDAR and Camera Sensor
Setups [68.8204255655161]
本論文では,LiDAR,単眼,ステレオカメラを含む任意のセンサのパラメータを校正する手法を提案する。
提案手法は、通常、車両のセットアップで見られるように、非常に異なる解像度とポーズのデバイスを扱うことができる。
論文 参考訳(メタデータ) (2021-01-12T12:02:26Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。