論文の概要: Deep UAV Localization with Reference View Rendering
- arxiv url: http://arxiv.org/abs/2008.04619v1
- Date: Tue, 11 Aug 2020 10:54:36 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-31 12:21:43.513537
- Title: Deep UAV Localization with Reference View Rendering
- Title(参考訳): 参照ビューレンダリングによるUAV深部位置推定
- Authors: Timo Hinzmann, Roland Siegwart
- Abstract要約: 本稿では,無人航空機(UAV)の非構造環境における局所化のための枠組みを,ディープラーニングの助けを借りて提案する。
6つのDef(Degrees-of-Freedom)カメラポーズ、カメラモデル、ジオレファレンス・オフィメージ、標高マップが与えられた光学・深度画像を生成するリアルタイムレンダリングエンジンが導入された。
レンダリングエンジンは学習ベースの6DoF逆合成ルーカスカナーデ(ICLK)アルゴリズムに組み込まれており、UAVが撮影したレンダリングされた実世界の画像を堅牢に整列させることができる。
- 参考スコア(独自算出の注目度): 36.69948191896119
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: This paper presents a framework for the localization of Unmanned Aerial
Vehicles (UAVs) in unstructured environments with the help of deep learning. A
real-time rendering engine is introduced that generates optical and depth
images given a six Degrees-of-Freedom (DoF) camera pose, camera model,
geo-referenced orthoimage, and elevation map. The rendering engine is embedded
into a learning-based six-DoF Inverse Compositional Lucas-Kanade (ICLK)
algorithm that is able to robustly align the rendered and real-world image
taken by the UAV. To learn the alignment under environmental changes, the
architecture is trained using maps spanning multiple years at high resolution.
The evaluation shows that the deep 6DoF-ICLK algorithm outperforms its
non-trainable counterparts by a large margin. To further support the research
in this field, the real-time rendering engine and accompanying datasets are
released along with this publication.
- Abstract(参考訳): 本稿では,無人航空機(UAV)の非構造環境における局所化のための枠組みについて述べる。
6自由度(dof)カメラポーズ、カメラモデル、地理参照直交画像、標高マップが与えられた、光学および深度画像を生成するリアルタイムレンダリングエンジンが導入された。
レンダリングエンジンは学習ベースの6DoF逆合成ルーカスカナーデ(ICLK)アルゴリズムに組み込まれており、UAVが撮影したレンダリングされた実世界の画像を堅牢に調整することができる。
環境変化下でのアライメントを学ぶために、アーキテクチャは高分解能で複数年にまたがる地図を用いて訓練される。
評価の結果、深部6DoF-ICLKアルゴリズムはトレーニング不能なアルゴリズムよりも大きなマージンで優れていた。
この分野での研究をさらに支援するために、リアルタイムレンダリングエンジンと付随するデータセットがこの出版物と共にリリースされている。
関連論文リスト
- Multiscale Representation for Real-Time Anti-Aliasing Neural Rendering [84.37776381343662]
Mip-NeRFは、スケール情報をエンコードする円錐フラストラムとしてマルチスケール表現を提案する。
我々は,リアルタイムなアンチエイリアスレンダリングのためのマルチスケールな明示的表現であるmip voxel grids (Mip-VoG)を提案する。
私たちのアプローチは、マルチスケールのトレーニングとリアルタイムのアンチエイリアスレンダリングを同時に提供する最初の方法です。
論文 参考訳(メタデータ) (2023-04-20T04:05:22Z) - Deep Learning Computer Vision Algorithms for Real-time UAVs On-board
Camera Image Processing [77.34726150561087]
本稿では,ディープラーニングに基づくコンピュータビジョンアルゴリズムを用いて,小型UAVのリアルタイムセンサ処理を実現する方法について述べる。
すべてのアルゴリズムは、ディープニューラルネットワークに基づく最先端の画像処理手法を用いて開発されている。
論文 参考訳(メタデータ) (2022-11-02T11:10:42Z) - Satellite Image Based Cross-view Localization for Autonomous Vehicle [59.72040418584396]
本稿では,市販の高精細衛星画像を使用可能な地図として利用することにより,良好な精度でクロスビュー車両のローカライゼーションを実現することができることを示す。
本手法はKITTIとFord Multi-AVの季節データセットを地上ビューとして,Google Mapsを衛星ビューとして検証した。
論文 参考訳(メタデータ) (2022-07-27T13:16:39Z) - TANDEM: Tracking and Dense Mapping in Real-time using Deep Multi-view
Stereo [55.30992853477754]
本稿では,リアルタイムな単分子追跡と高密度フレームワークであるTANDEMを紹介する。
ポーズ推定のために、TANDEMはアライメントのスライディングウィンドウに基づいて光度バンドル調整を行う。
TANDEMは最先端のリアルタイム3D再構成性能を示す。
論文 参考訳(メタデータ) (2021-11-14T19:01:02Z) - Real-time Geo-localization Using Satellite Imagery and Topography for
Unmanned Aerial Vehicles [18.71806336611299]
本稿では,UAV上の軽量組込みシステムにおいて,シーン変更と実用性に信頼性のあるフレームワークを提案する。
このフレームワークは、オフラインデータベースの準備とオンライン推論の2つのステージで構成されている。
2つの異なるUAVプラットフォーム上でのイメージベースローカライゼーションのフィールド実験を行い、その結果を検証した。
論文 参考訳(メタデータ) (2021-08-07T01:47:19Z) - Real-time dense 3D Reconstruction from monocular video data captured by
low-cost UAVs [0.3867363075280543]
リアルタイム3d再構築は,ナビゲーションや緊急時のライブ評価など,多数のアプリケーションにメリットがある環境の高速密マッピングを可能にする。
ほとんどのリアルタイム対応のアプローチとは対照的に、我々のアプローチは明示的な深度センサーを必要としない。
建物周辺を斜め視で飛行する無人航空機(UAV)の自己動作を利用して、選択された画像のカメラ軌道と深度の両方を、十分な新規な内容で推定します。
論文 参考訳(メタデータ) (2021-04-21T13:12:17Z) - Mesh Reconstruction from Aerial Images for Outdoor Terrain Mapping Using
Joint 2D-3D Learning [12.741811850885309]
本稿では,無人航空機から得られた頭上画像を用いて,屋外地形のマッピングを行う。
飛行中の航空画像からの深度推定は困難です。
各カメラの局所メッシュを再構成する2d-3d学習手法を共同開発し,地球環境モデルとして構築する。
論文 参考訳(メタデータ) (2021-01-06T02:09:03Z) - Deep 3D Capture: Geometry and Reflectance from Sparse Multi-View Images [59.906948203578544]
本稿では,任意の物体の高品質な形状と複雑な空間変化を持つBRDFを再構成する学習に基づく新しい手法を提案する。
まず、深層多視点ステレオネットワークを用いて、ビューごとの深度マップを推定する。
これらの深度マップは、異なるビューを粗く整列するために使用される。
本稿では,新しい多視点反射率推定ネットワークアーキテクチャを提案する。
論文 参考訳(メタデータ) (2020-03-27T21:28:54Z) - DeepURL: Deep Pose Estimation Framework for Underwater Relative
Localization [21.096166727043077]
本研究では,自律型水中車両(AUV)の6次元相対姿勢を1つの画像から決定するためのリアルタイム深層学習手法を提案する。
画像間翻訳ネットワークを用いて、レンダリングされた実画像間のギャップを埋めて、トレーニング用合成画像を生成する。
論文 参考訳(メタデータ) (2020-03-11T21:11:05Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。