論文の概要: Development, Optimization, and Deployment of Thermal Forward Vision
Systems for Advance Vehicular Applications on Edge Devices
- arxiv url: http://arxiv.org/abs/2301.07613v1
- Date: Wed, 18 Jan 2023 15:45:33 GMT
- ステータス: 処理完了
- システム内更新日: 2023-01-19 15:22:44.620090
- Title: Development, Optimization, and Deployment of Thermal Forward Vision
Systems for Advance Vehicular Applications on Edge Devices
- Title(参考訳): エッジデバイス用先端車両用サーマルフォワードビジョンシステムの開発, 最適化, 展開
- Authors: Muhammad Ali Farooq, Waseem Shariff, Faisal Khan, Peter Corcoran
- Abstract要約: 我々は、エンドツーエンドのYOLO深層学習フレームワークを用いたスマートフォワードセンシングシステムとして、熱的小型YOLO多クラスオブジェクト検出(TTYMOD)システムを提案する。
このシステムは大規模な熱機関で訓練され、35,000以上の異なる熱フレームからなる新たなオープンソースデータセットが新たに集められている。
温度調整されたナノネットワークの有効性を、平均精度、秒間フレーム、平均推定時間を含む様々な定性的指標を用いて定量化する。
- 参考スコア(独自算出の注目度): 0.3058685580689604
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: In this research work, we have proposed a thermal tiny-YOLO multi-class
object detection (TTYMOD) system as a smart forward sensing system that should
remain effective in all weather and harsh environmental conditions using an
end-to-end YOLO deep learning framework. It provides enhanced safety and
improved awareness features for driver assistance. The system is trained on
large-scale thermal public datasets as well as newly gathered novel
open-sourced dataset comprising of more than 35,000 distinct thermal frames.
For optimal training and convergence of YOLO-v5 tiny network variant on thermal
data, we have employed different optimizers which include stochastic decent
gradient (SGD), Adam, and its variant AdamW which has an improved
implementation of weight decay. The performance of thermally tuned tiny
architecture is further evaluated on the public as well as locally gathered
test data in diversified and challenging weather and environmental conditions.
The efficacy of a thermally tuned nano network is quantified using various
qualitative metrics which include mean average precision, frames per second
rate, and average inference time. Experimental outcomes show that the network
achieved the best mAP of 56.4% with an average inference time/ frame of 4
milliseconds. The study further incorporates optimization of tiny network
variant using the TensorFlow Lite quantization tool this is beneficial for the
deployment of deep learning architectures on the edge and mobile devices. For
this study, we have used a raspberry pi 4 computing board for evaluating the
real-time feasibility performance of an optimized version of the thermal object
detection network for the automotive sensor suite. The source code, trained and
optimized models and complete validation/ testing results are publicly
available at
https://github.com/MAli-Farooq/Thermal-YOLO-And-Model-Optimization-Using-TensorFlowLite.
- Abstract(参考訳): 本研究では, 気象・厳しい環境条件に対して, エンド・ツー・エンドのYOLO深層学習フレームワークを用いて, スマートフォワードセンシングシステムとして, 熱的小型ヨーロ多クラス物体検出(TTYMOD)システムを提案する。
安全を向上し、運転支援のための認識機能を改善する。
このシステムは、大規模なサーマルパブリックデータセットと、35,000以上の異なるサーマルフレームからなる新たなオープンソースデータセットに基づいて訓練されている。
熱データ上でのYOLO-v5小ネットワークの最適トレーニングと収束のために、確率的純度勾配(SGD)、Adam、および重量減衰を改良したAdamWを含む様々なオプティマイザを用いた。
温度調整された小型建築の性能は,多様で難易度の高い気象・環境条件下での局所的に収集された試験データとともに,一般向けにさらに評価される。
平均平均精度、秒間フレーム、平均推定時間を含む様々な定性的指標を用いて、熱調整ナノネットワークの有効性を定量化する。
実験の結果、ネットワークは平均推算時間/フレーム4ミリ秒で56.4%のベストマップを達成した。
この研究ではさらに、tensorflow lite量子化ツールを用いた小さなネットワーク変種の最適化が組み込まれており、エッジとモバイルデバイスにディープラーニングアーキテクチャをデプロイするのに有用である。
本研究では,Raspberry pi 4コンピューティングボードを用いて,自動車用センサ用サーマルオブジェクト検出ネットワークの最適化版の性能評価を行った。
ソースコード、トレーニングされたモデル、完全な検証/テスト結果はhttps://github.com/MAli-Farooq/Thermal-YOLO-And-Model-Optimization-Using-TensorFlowLiteで公開されている。
関連論文リスト
- Task-Oriented Real-time Visual Inference for IoVT Systems: A Co-design Framework of Neural Networks and Edge Deployment [61.20689382879937]
タスク指向エッジコンピューティングは、データ分析をエッジにシフトすることで、この問題に対処する。
既存の手法は、高いモデル性能と低いリソース消費のバランスをとるのに苦労している。
ニューラルネットワークアーキテクチャを最適化する新しい協調設計フレームワークを提案する。
論文 参考訳(メタデータ) (2024-10-29T19:02:54Z) - Comparison of edge computing methods in Internet of Things architectures for efficient estimation of indoor environmental parameters with Machine Learning [0.0]
室内環境品質(IEQ)パラメータを推定する軽量機械学習モデルを提案する。
その実装は、集中化された分散並列IoTアーキテクチャに基づいており、無線で接続されている。
MLモデルのトレーニングとテストは、小さな温度と照度データセットに焦点を当てた実験によって達成される。
論文 参考訳(メタデータ) (2024-02-07T21:15:18Z) - Small Temperature is All You Need for Differentiable Architecture Search [8.93957397187611]
微分可能なアーキテクチャサーチ(DARTS)は、高効率な勾配に基づくニューラルアーキテクチャサーチ(NAS)をもたらす
そこで本研究では, トレーニングにおける緩和スーパーネットとプルーニングファイナネットとのギャップを, 低温利用による評価で埋めることを提案する。
論文 参考訳(メタデータ) (2023-06-12T04:01:57Z) - Online Data Selection for Federated Learning with Limited Storage [53.46789303416799]
ネットワークデバイス間での分散機械学習を実現するために、フェデレートラーニング(FL)が提案されている。
デバイス上のストレージがFLの性能に与える影響はまだ調査されていない。
本研究では,デバイス上のストレージを限定したFLのオンラインデータ選択について検討する。
論文 参考訳(メタデータ) (2022-09-01T03:27:33Z) - Evaluation of Thermal Imaging on Embedded GPU Platforms for Application
in Vehicular Assistance Systems [0.5156484100374058]
本研究は、スマートで安全な車両用サーマルオブジェクト検出のリアルタイム性能を評価することに焦点を当てた。
35,000以上の異なるフレームからなる新しい大規模熱データセットを取得する。
トレーニングネットワークの有効性は、様々な定量的指標を用いて、広範なテストデータに基づいて検証される。
論文 参考訳(メタデータ) (2022-01-05T15:36:25Z) - Neural Architecture Search for Efficient Uncalibrated Deep Photometric
Stereo [105.05232615226602]
差別化可能なニューラルアーキテクチャサーチ(NAS)戦略を利用して、非校正型PSアーキテクチャを自動的に見つける。
DiLiGenTデータセットの実験では、自動検索されたニューラルネットワークのパフォーマンスが、最先端の未校正PSメソッドと好適に比較されている。
論文 参考訳(メタデータ) (2021-10-11T21:22:17Z) - Meta-UDA: Unsupervised Domain Adaptive Thermal Object Detection using
Meta-Learning [64.92447072894055]
赤外線(IR)カメラは、照明条件や照明条件が悪ければ頑丈である。
既存のUDA手法を改善するためのアルゴリズムメタ学習フレームワークを提案する。
KAISTおよびDSIACデータセットのための最先端熱検出器を作成した。
論文 参考訳(メタデータ) (2021-10-07T02:28:18Z) - Object Detection in Thermal Spectrum for Advanced Driver-Assistance
Systems (ADAS) [0.5156484100374058]
熱赤外スペクトルにおける物体検出は、低照度条件と異なる気象条件においてより信頼性の高いデータソースを提供する。
本稿では,高度運転支援システム(ADAS)の7つの異なるクラスを用いたサーマルビジョンにおける最先端のオブジェクト・ビジョン・フレームワークの探索と適用について述べる。
公開データセット上のトレーニング済みネットワーク変種は、3つの異なるテストアプローチでテストデータ上で検証される。
訓練されたネットワークの有効性は、未冷却のLWIRプロトタイプ熱カメラで捉えたローカル収集された新しいテストデータで検証される。
論文 参考訳(メタデータ) (2021-09-20T21:38:55Z) - Exploiting Adam-like Optimization Algorithms to Improve the Performance
of Convolutional Neural Networks [82.61182037130405]
勾配降下(SGD)は深いネットワークを訓練するための主要なアプローチです。
本研究では,現在と過去の勾配の違いに基づいて,Adamに基づく変分を比較する。
resnet50を勾配降下訓練したネットワークのアンサンブルと融合実験を行った。
論文 参考訳(メタデータ) (2021-03-26T18:55:08Z) - A Sequential Modelling Approach for Indoor Temperature Prediction and
Heating Control in Smart Buildings [4.759925918369102]
本稿では,室内温度の予測にデータ駆動統計手法を逐次適用するための学習ベースフレームワークを提案する。
実験では、モデリングアプローチと制御アルゴリズムの有効性を実証し、スマートビルディングアプリケーションにおける混合データ駆動アプローチの有望な可能性を明らかにする。
論文 参考訳(メタデータ) (2020-09-21T13:20:27Z) - A Generative Learning Approach for Spatio-temporal Modeling in Connected
Vehicular Network [55.852401381113786]
本稿では,コネクテッドカーの無線アクセス遅延を実現するための総合的時間品質フレームワークであるLaMI(Latency Model Inpainting)を提案する。
LaMIはイメージインペイントと合成のアイデアを採用し、2段階の手順で欠落したレイテンシサンプルを再構築することができる。
特に、パッチ方式のアプローチを用いて各地域で収集されたサンプル間の空間的相関を初めて発見し、その後、原点および高度に相関したサンプルをバラエナオートコーダ(VAE)に供給する。
論文 参考訳(メタデータ) (2020-03-16T03:43:59Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。