論文の概要: Braille Letter Reading: A Benchmark for Spatio-Temporal Pattern
Recognition on Neuromorphic Hardware
- arxiv url: http://arxiv.org/abs/2205.15864v1
- Date: Mon, 30 May 2022 14:30:45 GMT
- ステータス: 処理完了
- システム内更新日: 2022-06-01 13:28:02.765953
- Title: Braille Letter Reading: A Benchmark for Spatio-Temporal Pattern
Recognition on Neuromorphic Hardware
- Title(参考訳): 点字読解:ニューロモルフィックハードウェアにおける時空間パターン認識のためのベンチマーク
- Authors: Simon F Muller-Cleve, Vittorio Fra, Lyes Khacef, Alejandro
Pequeno-Zurro, Daniel Klepatsch, Evelina Forno, Diego G Ivanovich, Shavika
Rastogi, Gianvito Urgese, Friedemann Zenke, Chiara Bartolozzi
- Abstract要約: 近年の深層学習手法は,そのようなタスクにおいて精度が向上しているが,従来の組込みソリューションへの実装は依然として計算量が非常に高く,エネルギーコストも高い。
文字読み込みによるエッジにおける触覚パターン認識のための新しいベンチマークを提案する。
フィードフォワードとリカレントスパイキングニューラルネットワーク(SNN)を、サロゲート勾配の時間によるバックプロパゲーションを用いてオフラインでトレーニングし比較し、効率的な推論のためにIntel Loihimorphicチップにデプロイした。
LSTMは14%の精度で繰り返しSNNより優れており、Loihi上での繰り返しSNNは237倍のエネルギーである。
- 参考スコア(独自算出の注目度): 50.380319968947035
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Spatio-temporal pattern recognition is a fundamental ability of the brain
which is required for numerous real-world applications. Recent deep learning
approaches have reached outstanding accuracy in such tasks, but their
implementation on conventional embedded solutions is still very computationally
and energy expensive. Tactile sensing in robotic applications is a
representative example where real-time processing and energy-efficiency are
required. Following a brain-inspired computing approach, we propose a new
benchmark for spatio-temporal tactile pattern recognition at the edge through
braille letters reading. We recorded a new braille letters dataset based on the
capacitive tactile sensors/fingertip of the iCub robot, then we investigated
the importance of temporal information and the impact of event-based encoding
for spike-based/event-based computation. Afterwards, we trained and compared
feed-forward and recurrent spiking neural networks (SNNs) offline using
back-propagation through time with surrogate gradients, then we deployed them
on the Intel Loihi neuromorphic chip for fast and efficient inference. We
confronted our approach to standard classifiers, in particular to a Long
Short-Term Memory (LSTM) deployed on the embedded Nvidia Jetson GPU in terms of
classification accuracy, power/energy consumption and computational delay. Our
results show that the LSTM outperforms the recurrent SNN in terms of accuracy
by 14%. However, the recurrent SNN on Loihi is 237 times more energy-efficient
than the LSTM on Jetson, requiring an average power of only 31mW. This work
proposes a new benchmark for tactile sensing and highlights the challenges and
opportunities of event-based encoding, neuromorphic hardware and spike-based
computing for spatio-temporal pattern recognition at the edge.
- Abstract(参考訳): 時空間パターン認識は、多くの現実世界の応用に必要とされる脳の基本能力である。
近年の深層学習の手法は,そのようなタスクにおいて顕著な精度を達成しているが,従来の組込みソリューションへの実装はいまだに非常に計算量が多く,エネルギーコストも高い。
ロボット応用における触覚は、リアルタイム処理とエネルギー効率が要求される典型的な例である。
脳にインスパイアされたコンピューティングアプローチに従って,点字文字読取によるエッジにおける時空間触覚パターン認識の新しいベンチマークを提案する。
icubロボットの静電容量型触覚センサ/fingertipに基づく新しい点字文字データセットを作成し,スパイクベース/イベントベース計算における時間情報の重要性とイベントエンコーディングの影響について検討した。
その後、サロゲート勾配によるバックプロパゲーションを用いてフィードフォワードとリカレントスパイキングニューラルネットワーク(SNN)をオフラインでトレーニング、比較し、高速かつ効率的な推論のためにIntel Loihiニューロモルフィックチップにデプロイした。
我々は、標準分類器、特にNvidia Jetson GPUに実装されたLong Short-Term Memory(LSTM)に対して、分類精度、消費電力、計算遅延の観点から、我々のアプローチに直面した。
その結果,LSTMは再発SNNの精度を14%向上させることがわかった。
しかし、リカレントSNNはジェットソンのLSTMの237倍エネルギー効率が高く、平均出力は31mWである。
本研究は触覚センシングの新しいベンチマークを提案し、エッジにおける時空間パターン認識のためのイベントベースのエンコーディング、ニューロモルフィックハードウェア、スパイクベースのコンピューティングの課題と機会を強調する。
関連論文リスト
- Energy-Efficient Spiking Recurrent Neural Network for Gesture Recognition on Embedded GPUs [1.37621344207686]
本研究では,スピーキングリカレントニューラルネットワーク(SRNN)と液体時間定数ニューロンを併用したジェスチャー認識システムについて検討した。
NVIDIA Jetson Nano組み込みGPUプラットフォームにおけるエネルギー効率と計算効率に着目した。
論文 参考訳(メタデータ) (2024-08-23T10:50:29Z) - Low-power event-based face detection with asynchronous neuromorphic
hardware [2.0774873363739985]
本稿では、SynSense Speckニューロモルフィックチップ上に展開されたイベントベースの顔検出のためのオンチップスパイクニューラルネットワークの最初の例を示す。
トレーニングに用いるオフチップクロック駆動シミュレーションとオンチップイベント駆動推論との精度の相違について述べる。
オンチップ顔検出のmAP[0.5]は0.6で、20mWしか消費しない。
論文 参考訳(メタデータ) (2023-12-21T19:23:02Z) - Ultra-low-power Image Classification on Neuromorphic Hardware [3.784976081087904]
スパイキングニューラルネットワーク(SNN)は、時間的および空間的間隔を利用して超低消費電力の応用を約束する。
空間的特徴に大きく依存する視覚タスクの時間的バックプロパゲーションを用いたSNNの訓練には,計算コストがかかる。
本稿では,最初のスパイクまでの時間に基づく時間的ANN-to-SNN変換法であるQuartzを提案する。
論文 参考訳(メタデータ) (2023-09-28T18:53:43Z) - ETLP: Event-based Three-factor Local Plasticity for online learning with
neuromorphic hardware [105.54048699217668]
イベントベース3要素局所塑性(ETLP)の計算複雑性に明らかな優位性を有する精度の競争性能を示す。
また, 局所的可塑性を用いた場合, スパイキングニューロンの閾値適応, 繰り返しトポロジーは, 時間的構造が豊富な時間的パターンを学習するために必要であることを示した。
論文 参考訳(メタデータ) (2023-01-19T19:45:42Z) - Intelligence Processing Units Accelerate Neuromorphic Learning [52.952192990802345]
スパイキングニューラルネットワーク(SNN)は、エネルギー消費と遅延の観点から、桁違いに改善されている。
我々は、カスタムSNN PythonパッケージsnnTorchのIPU最適化リリースを提示する。
論文 参考訳(メタデータ) (2022-11-19T15:44:08Z) - DNN Training Acceleration via Exploring GPGPU Friendly Sparsity [16.406482603838157]
本稿では、従来のランダムなニューロンやシナプスのドロップアウトを、通常のオンラインの行ベースもしくはタイルベースのドロップアウトパターンに置き換える近似ランダムドロップアウトを提案する。
次に,SGDに基づく探索アルゴリズムを開発し,行ベースあるいはタイルベースのドロップアウトパターンの分布を生成し,潜在的な精度損失を補う。
また,入力特徴図をその感度に基づいて動的にドロップアウトし,前向きおよび後向きのトレーニングアクセラレーションを実現するための感度対応ドロップアウト手法を提案する。
論文 参考訳(メタデータ) (2022-03-11T01:32:03Z) - FPGA-optimized Hardware acceleration for Spiking Neural Networks [69.49429223251178]
本研究は,画像認識タスクに適用したオフライントレーニングによるSNN用ハードウェアアクセラレータの開発について述べる。
この設計はXilinx Artix-7 FPGAをターゲットにしており、利用可能なハードウェアリソースの40%を合計で使用している。
分類時間を3桁に短縮し、ソフトウェアと比較すると精度にわずか4.5%の影響を与えている。
論文 参考訳(メタデータ) (2022-01-18T13:59:22Z) - Spike-inspired Rank Coding for Fast and Accurate Recurrent Neural
Networks [5.986408771459261]
生物学的スパイクニューラルネットワーク(SNN)は、その出力の情報を時間的にエンコードすることができるが、人工ニューラルネットワーク(ANN)は従来はそうではない。
ここでは、SNNにインスパイアされたランク符号化(RC)のような時間符号化が、LSTMなどの従来のANNにも適用可能であることを示す。
RCトレーニングは推論中の時間と監視を著しく低減し、精度は最小限に抑えられる。
逐次分類の2つのおもちゃ問題と、最初の入力時間ステップ後にRCモデルが99.19%の精度を達成できる時間符号化MNISTデータセットにおいて、これらを実証する。
論文 参考訳(メタデータ) (2021-10-06T15:51:38Z) - One-step regression and classification with crosspoint resistive memory
arrays [62.997667081978825]
高速で低エネルギーのコンピュータは、エッジでリアルタイム人工知能を実現するために要求されている。
ワンステップ学習は、ボストンの住宅のコスト予測と、MNIST桁認識のための2層ニューラルネットワークのトレーニングによって支援される。
結果は、クロスポイントアレイ内の物理計算、並列計算、アナログ計算のおかげで、1つの計算ステップで得られる。
論文 参考訳(メタデータ) (2020-05-05T08:00:07Z) - Temporal Pulses Driven Spiking Neural Network for Fast Object
Recognition in Autonomous Driving [65.36115045035903]
スパイキングニューラルネットワーク(SNN)を用いた生時間パルスで直接物体認識問題に対処する手法を提案する。
各種データセットを用いて評価した結果,提案手法は最先端の手法に匹敵する性能を示しながら,優れた時間効率を実現している。
論文 参考訳(メタデータ) (2020-01-24T22:58:55Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。