論文の概要: LaneSNNs: Spiking Neural Networks for Lane Detection on the Loihi
Neuromorphic Processor
- arxiv url: http://arxiv.org/abs/2208.02253v1
- Date: Wed, 3 Aug 2022 14:51:15 GMT
- ステータス: 処理完了
- システム内更新日: 2022-08-05 12:04:30.046301
- Title: LaneSNNs: Spiking Neural Networks for Lane Detection on the Loihi
Neuromorphic Processor
- Title(参考訳): LaneSNN:Loihiニューロモルフィックプロセッサ上でのレーン検出のためのスパイクニューラルネットワーク
- Authors: Alberto Viale and Alberto Marchisio and Maurizio Martina and Guido
Masera and Muhammad Shafique
- Abstract要約: 我々は、イベントベースのカメラ入力を用いて、道路にマークされた車線を検出するための新しいSNNベースのアプローチであるLaneSNNを提案する。
我々は、学習したSNNモデルをIntel Loihi Neuromorphic Research Chipに実装し、マッピングする。
損失関数に対して,重み付き二元交叉エントロピー(WCE)と平均二乗誤差(MSE)の線形合成に基づく新しい手法を開発した。
- 参考スコア(独自算出の注目度): 12.47874622269824
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Autonomous Driving (AD) related features represent important elements for the
next generation of mobile robots and autonomous vehicles focused on
increasingly intelligent, autonomous, and interconnected systems. The
applications involving the use of these features must provide, by definition,
real-time decisions, and this property is key to avoid catastrophic accidents.
Moreover, all the decision processes must require low power consumption, to
increase the lifetime and autonomy of battery-driven systems. These challenges
can be addressed through efficient implementations of Spiking Neural Networks
(SNNs) on Neuromorphic Chips and the use of event-based cameras instead of
traditional frame-based cameras.
In this paper, we present a new SNN-based approach, called LaneSNN, for
detecting the lanes marked on the streets using the event-based camera input.
We develop four novel SNN models characterized by low complexity and fast
response, and train them using an offline supervised learning rule. Afterward,
we implement and map the learned SNNs models onto the Intel Loihi Neuromorphic
Research Chip. For the loss function, we develop a novel method based on the
linear composition of Weighted binary Cross Entropy (WCE) and Mean Squared
Error (MSE) measures. Our experimental results show a maximum Intersection over
Union (IoU) measure of about 0.62 and very low power consumption of about 1 W.
The best IoU is achieved with an SNN implementation that occupies only 36
neurocores on the Loihi processor while providing a low latency of less than 8
ms to recognize an image, thereby enabling real-time performance. The IoU
measures provided by our networks are comparable with the state-of-the-art, but
at a much low power consumption of 1 W.
- Abstract(参考訳): 自律運転(AD)関連の機能は、ますますインテリジェントで自律的で相互接続されたシステムに焦点を当てた次世代の移動ロボットや自動運転車にとって重要な要素である。
これらの機能の使用に関わるアプリケーションは、定義上、リアルタイムな決定を提供する必要があり、この特性は破滅的な事故を避けるための鍵となる。
さらに、すべての意思決定プロセスは、バッテリー駆動システムの寿命と自律性を高めるために、低消費電力を必要とする。
これらの課題は、ニューロモルフィックチップへのスパイクニューラルネットワーク(snn)の効率的な実装と、従来のフレームベースのカメラではなくイベントベースのカメラの使用によって対処できる。
本稿では、イベントベースのカメラ入力を用いて、道路にマークされた車線を検出するための新しいSNNベースのアプローチであるLaneSNNを提案する。
低複雑性と高速応答を特徴とする4つの新しいsnモデルを開発し,オフライン教師付き学習ルールを用いて学習する。
その後、学習したSNNモデルをIntel Loihi Neuromorphic Research Chipに実装し、マッピングする。
損失関数に対して,重み付き二元交叉エントロピー(WCE)と平均二乗誤差(MSE)の線形合成に基づく新しい手法を開発した。
実験結果から,Louhiプロセッサ上の36個のニューロコアのみを占有するSNN実装により,画像の認識に8ミリ秒未満の低レイテンシを実現し,リアルタイム性能を実現した。
我々のネットワークが提供するIoU対策は最先端技術に匹敵するが、消費電力は1Wよりもはるかに少ない。
関連論文リスト
- EvSegSNN: Neuromorphic Semantic Segmentation for Event Data [0.6138671548064356]
EvSegSNN は、Parametric Leaky Integrate と Fire のニューロンに依存した、生物学的に検証可能なエンコーダ-デコーダU字型アーキテクチャである。
本稿では,スパイキングニューラルネットワークとイベントカメラを組み合わせることによって,エンド・ツー・エンドのバイオインスパイアされたセマンティックセマンティックセマンティクス手法を提案する。
DDD17で実施された実験は、EvSegSNNがMIoUの観点から最も近い最先端モデルを上回っていることを示している。
論文 参考訳(メタデータ) (2024-06-20T10:36:24Z) - Autonomous Driving using Spiking Neural Networks on Dynamic Vision
Sensor Data: A Case Study of Traffic Light Change Detection [0.0]
スパイキングニューラルネットワーク(SNN)は、情報処理と意思決定のための代替モデルを提供する。
自動運転にSNNを用いた最近の研究は主に、簡易なシミュレーション環境における車線維持のような単純なタスクに焦点を当てている。
本研究は,実車上でSNNを使用するための重要なステップであるCARLAシミュレータにおける実写走行シーンについて,SNNについて検討する。
論文 参考訳(メタデータ) (2023-09-27T23:31:30Z) - Intelligence Processing Units Accelerate Neuromorphic Learning [52.952192990802345]
スパイキングニューラルネットワーク(SNN)は、エネルギー消費と遅延の観点から、桁違いに改善されている。
我々は、カスタムSNN PythonパッケージsnnTorchのIPU最適化リリースを提示する。
論文 参考訳(メタデータ) (2022-11-19T15:44:08Z) - Fluid Batching: Exit-Aware Preemptive Serving of Early-Exit Neural
Networks on Edge NPUs [74.83613252825754]
スマートエコシステム(smart ecosystems)"は、スタンドアロンではなく、センセーションが同時に行われるように形成されています。
これはデバイス上の推論パラダイムを、エッジにニューラル処理ユニット(NPU)をデプロイする方向にシフトしている。
そこで本研究では,実行時のプリエンプションが到着・終了プロセスによってもたらされる動的性を考慮に入れた,新しい早期終了スケジューリングを提案する。
論文 参考訳(メタデータ) (2022-09-27T15:04:01Z) - Object Detection with Spiking Neural Networks on Automotive Event Data [0.0]
我々は、イベントカメラから直接スパイキングニューラルネットワーク(SNN)を訓練し、高速で効率的な自動車組込みアプリケーションを設計することを提案する。
本稿では,2つの自動車イベントデータセットの実験を行い,スパイクニューラルネットワークのための最先端の分類結果を確立した。
論文 参考訳(メタデータ) (2022-05-09T14:39:47Z) - Training High-Performance Low-Latency Spiking Neural Networks by
Differentiation on Spike Representation [70.75043144299168]
スパイキングニューラルネットワーク(SNN)は、ニューロモルフィックハードウェア上に実装された場合、有望なエネルギー効率のAIモデルである。
非分化性のため、SNNを効率的に訓練することは困難である。
本稿では,ハイパフォーマンスを実現するスパイク表現法(DSR)の差分法を提案する。
論文 参考訳(メタデータ) (2022-05-01T12:44:49Z) - FPGA-optimized Hardware acceleration for Spiking Neural Networks [69.49429223251178]
本研究は,画像認識タスクに適用したオフライントレーニングによるSNN用ハードウェアアクセラレータの開発について述べる。
この設計はXilinx Artix-7 FPGAをターゲットにしており、利用可能なハードウェアリソースの40%を合計で使用している。
分類時間を3桁に短縮し、ソフトウェアと比較すると精度にわずか4.5%の影響を与えている。
論文 参考訳(メタデータ) (2022-01-18T13:59:22Z) - CarSNN: An Efficient Spiking Neural Network for Event-Based Autonomous
Cars on the Loihi Neuromorphic Research Processor [15.093607722961407]
スパイキングニューラルネットワーク(SNN)は低レイテンシと低消費電力で高性能を実現する。
本稿では、イベントベースカメラに接続されたSNNを用いて、自律運転(AD)の重要な問題に直面する。
実験はオフラインで教師付き学習規則に従って行われ、学習したSNNモデルをIntel Loihi Neuromorphic Research Chipにマッピングする。
論文 参考訳(メタデータ) (2021-07-01T12:20:48Z) - A Spiking Neural Network for Image Segmentation [3.4998703934432682]
我々は,深層ニューラルネットワーク(ANN)アーキテクチャのU-Netを,Nengoフレームワークを用いたスパイキングニューラルネットワーク(SNN)アーキテクチャに変換する。
レートベースモデルとスパイクベースモデルの両方がトレーニングされ、パフォーマンスとパワーのベンチマークに最適化されている。
Intel Loihiのニューロモルフィックチップのニューロモルフィック実装は、従来のハードウェアよりも2倍エネルギー効率が高い。
論文 参考訳(メタデータ) (2021-06-16T16:23:18Z) - Progressive Tandem Learning for Pattern Recognition with Deep Spiking
Neural Networks [80.15411508088522]
スパイキングニューラルネットワーク(SNN)は、低レイテンシと高い計算効率のために、従来の人工知能ニューラルネットワーク(ANN)よりも優位性を示している。
高速かつ効率的なパターン認識のための新しいANN-to-SNN変換およびレイヤワイズ学習フレームワークを提案する。
論文 参考訳(メタデータ) (2020-07-02T15:38:44Z) - Temporal Pulses Driven Spiking Neural Network for Fast Object
Recognition in Autonomous Driving [65.36115045035903]
スパイキングニューラルネットワーク(SNN)を用いた生時間パルスで直接物体認識問題に対処する手法を提案する。
各種データセットを用いて評価した結果,提案手法は最先端の手法に匹敵する性能を示しながら,優れた時間効率を実現している。
論文 参考訳(メタデータ) (2020-01-24T22:58:55Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。