論文の概要: Ultra-low Power Deep Learning-based Monocular Relative Localization
Onboard Nano-quadrotors
- arxiv url: http://arxiv.org/abs/2303.01940v1
- Date: Fri, 3 Mar 2023 14:14:08 GMT
- ステータス: 処理完了
- システム内更新日: 2023-03-06 14:58:14.973167
- Title: Ultra-low Power Deep Learning-based Monocular Relative Localization
Onboard Nano-quadrotors
- Title(参考訳): 超低消費電力深層学習によるナノクワッドロータ上の単分子相対局在
- Authors: Stefano Bonato, Stefano Carlo Lambertenghi, Elia Cereda, Alessandro
Giusti, Daniele Palossi
- Abstract要約: この研究は、2つのピアナノドロンのディープニューラルネットワーク(DNN)を介して、単分子の相対的な局所化に対処する、新しい自律的なエンドツーエンドシステムを示す。
超制約ナノドローンプラットフォームに対処するため,データセットの増大,量子化,システム最適化などを含む垂直統合フレームワークを提案する。
実験の結果,DNNは低分解能モノクローム画像のみを用いて最大2mの距離で10cmのターゲットナノドローンを正確に局在させることができることがわかった。
- 参考スコア(独自算出の注目度): 64.68349896377629
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Precise relative localization is a crucial functional block for swarm
robotics. This work presents a novel autonomous end-to-end system that
addresses the monocular relative localization, through deep neural networks
(DNNs), of two peer nano-drones, i.e., sub-40g of weight and sub-100mW
processing power. To cope with the ultra-constrained nano-drone platform, we
propose a vertically-integrated framework, from the dataset collection to the
final in-field deployment, including dataset augmentation, quantization, and
system optimizations. Experimental results show that our DNN can precisely
localize a 10cm-size target nano-drone by employing only low-resolution
monochrome images, up to ~2m distance. On a disjoint testing dataset our model
yields a mean R2 score of 0.42 and a root mean square error of 18cm, which
results in a mean in-field prediction error of 15cm and in a closed-loop
control error of 17cm, over a ~60s-flight test. Ultimately, the proposed system
improves the State-of-the-Art by showing long-endurance tracking performance
(up to 2min continuous tracking), generalization capabilities being deployed in
a never-seen-before environment, and requiring a minimal power consumption of
95mW for an onboard real-time inference-rate of 48Hz.
- Abstract(参考訳): 精密相対局在化は群ロボットにとって重要な機能ブロックである。
本研究は、2つのピアナノドロンのディープニューラルネットワーク(dnn)、すなわち40g以下の重みと100mw以下の処理パワーを介して、単眼的な相対的局在に対処する新しい自律的なエンドツーエンドシステムを提案する。
超制約のナノドローンプラットフォームに対処するため,データセット収集から,データセット増量,量子化,システム最適化を含む最終現場展開までの,垂直統合フレームワークを提案する。
実験の結果,DNNは低分解能モノクローム画像のみを用いて最大2mの距離で10cmのターゲットナノドローンを正確に局在させることができることがわかった。
解離試験データセットでは, 平均R2スコアが0.42, 根平均2乗誤差が18cmとなり, 平均現地予測誤差が15cm, 閉ループ制御誤差が17cmとなり, 約60s飛行試験が実施される。
提案システムでは、長時間のトラッキング性能(最大2分連続トラッキング)、予期せぬ環境に展開される一般化能力、搭載した48Hzのリアルタイム推論レートで95mWの電力消費を最小限に抑えることで、その状態を改善する。
関連論文リスト
- Training on the Fly: On-device Self-supervised Learning aboard Nano-drones within 20 mW [52.280742520586756]
ナノドローンのような小さな機械学習(TinyML)を利用した小型サイバー物理システム(CPS)は、ますます魅力的な技術になりつつある。
単純な電子回路はこれらのCPSを安価にすることができるが、計算、メモリ、センサーの資源を著しく制限する。
本稿では,ナノドロンの限られた超低消費電力資源にのみ依存する,オンデバイスファインチューニング手法を提案する。
論文 参考訳(メタデータ) (2024-08-06T13:11:36Z) - On-device Self-supervised Learning of Visual Perception Tasks aboard
Hardware-limited Nano-quadrotors [53.59319391812798]
SI50グラム以下のナノドロンは、学術と産業の両方で勢いを増している。
彼らの最も魅力的なアプリケーションは、知覚のためのディープラーニングモデルに依存している。
未知の環境にデプロイする場合、これらのモデルはドメインシフトによってパフォーマンスが低下することが多い。
本研究では,ナノドローンを用いたデバイス上での学習を初めて提案する。
論文 参考訳(メタデータ) (2024-03-06T22:04:14Z) - Optimized Deployment of Deep Neural Networks for Visual Pose Estimation
on Nano-drones [9.806742394395322]
小型無人航空機(UAV)は小型化が進み、屋内ナビゲーションや人体監視といった新しいタスクが可能になった。
本研究では,Deep Neural Networks (DNN) を用いた視覚的ポーズ推定タスクの自動最適化パイプラインを提案する。
その結果,アイソエラー時の予測遅延を最大3.22倍改善した。
論文 参考訳(メタデータ) (2024-02-23T11:35:57Z) - High-throughput Visual Nano-drone to Nano-drone Relative Localization using Onboard Fully Convolutional Networks [51.23613834703353]
相対的なドローンとドローンのローカライゼーションは、どんなSwarm操作でも基本的なビルディングブロックである。
我々は、新しいビジョンベース完全畳み込みニューラルネットワーク(FCNN)に基づく垂直統合システムを提案する。
その結果,水平画像座標で32~47%,垂直画像座標で18~55%,実世界の30k画像のデータセットでR2乗改善が得られた。
論文 参考訳(メタデータ) (2024-02-21T12:34:31Z) - Semantic Segmentation in Satellite Hyperspectral Imagery by Deep Learning [54.094272065609815]
本稿では1D-Justo-LiuNetという軽量な1D-CNNモデルを提案する。
1D-Justo-LiuNetは、全てのテストモデルの中で最小のモデルサイズ (4,563 パラメータ) を持つ最大精度 (0.93) を達成する。
論文 参考訳(メタデータ) (2023-10-24T21:57:59Z) - Real-time Monocular Depth Estimation on Embedded Systems [32.40848141360501]
2つの効率的なRT-MonoDepthアーキテクチャとRT-MonoDepth-Sアーキテクチャを提案する。
RT-MonoDepthとRT-MonoDepth-SはNVIDIA Jetson Nanoで18.4&30.5 FPS、Jetson AGX Orinで253.0&364.1 FPSを達成した。
論文 参考訳(メタデータ) (2023-08-21T08:59:59Z) - Real-Time Monocular Human Depth Estimation and Segmentation on Embedded
Systems [13.490605853268837]
移動中の歩行者に対する衝突回避を実現するためにシーンの深さを推定することは、ロボット分野における決定的かつ基本的な問題である。
本稿では,室内環境における人体深度推定とセグメンテーションを高速かつ高精度に行うための,新しい低複雑性ネットワークアーキテクチャを提案する。
論文 参考訳(メタデータ) (2021-08-24T03:26:08Z) - Planetary UAV localization based on Multi-modal Registration with
Pre-existing Digital Terrain Model [0.5156484100374058]
我々は,UAV上のナディルビューカメラを用いて,惑星UAVの位置を推定するマルチモーダル登録に基づくSLAMアルゴリズムを提案する。
オンボードUAV画像とプリインストールデジタル地形モデルとのスケールと外観の違いを克服するために,UAV画像とDEMの地形特性がクロスパワースペクトルを介して周波数領域で相関できることを示す理論的モデルを提案した。
提案するローカライゼーションアルゴリズムのロバスト性と有効性をテストするために,惑星探査のための新しいクロスソースドローンベースのローカライゼーションデータセットを提案する。
論文 参考訳(メタデータ) (2021-06-24T02:54:01Z) - ANNETTE: Accurate Neural Network Execution Time Estimation with Stacked
Models [56.21470608621633]
本稿では,アーキテクチャ検索を対象ハードウェアから切り離すための時間推定フレームワークを提案する。
提案手法は,マイクロカーネルと多層ベンチマークからモデルの集合を抽出し,マッピングとネットワーク実行時間推定のためのスタックモデルを生成する。
生成した混合モデルの推定精度と忠実度, 統計モデルとルーフラインモデル, 評価のための洗練されたルーフラインモデルを比較した。
論文 参考訳(メタデータ) (2021-05-07T11:39:05Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。