論文の概要: Static Hand Gesture Recognition for American Sign Language using
Neuromorphic Hardware
- arxiv url: http://arxiv.org/abs/2207.12559v1
- Date: Mon, 25 Jul 2022 22:28:04 GMT
- ステータス: 処理完了
- システム内更新日: 2022-07-27 12:14:38.987261
- Title: Static Hand Gesture Recognition for American Sign Language using
Neuromorphic Hardware
- Title(参考訳): ニューロモルフィックハードウェアを用いたアメリカ手話の静的ハンドジェスチャ認識
- Authors: MohammedReza Mohammadi, Peyton Chandarana, James Seekings, Sara
Hendrix, Ramtin Zand
- Abstract要約: 我々は2つの静的アメリカン手話(ASL)手話分類タスクのための4つのスパイキングニューラルネットワーク(SNN)モデルを開発した。
SNNモデルはIntelのニューロモーフィックプラットフォームであるLoihiにデプロイされ、エッジコンピューティングデバイスにデプロイされた等価ディープニューラルネットワーク(DNN)モデルと比較される。
最高のDNNモデルはASL Alphabetデータセットで99.6%の精度を達成するが、最高のパフォーマンスのSNNモデルは99.44%の精度である。
- 参考スコア(独自算出の注目度): 0.11083289076967892
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In this paper, we develop four spiking neural network (SNN) models for two
static American Sign Language (ASL) hand gesture classification tasks, i.e.,
the ASL Alphabet and ASL Digits. The SNN models are deployed on Intel's
neuromorphic platform, Loihi, and then compared against equivalent deep neural
network (DNN) models deployed on an edge computing device, the Intel Neural
Compute Stick 2 (NCS2). We perform a comprehensive comparison between the two
systems in terms of accuracy, latency, power consumption, and energy. The best
DNN model achieves an accuracy of 99.6% on the ASL Alphabet dataset, whereas
the best performing SNN model has an accuracy of 99.44%. For the ASL-Digits
dataset, the best SNN model outperforms all of its DNN counterparts with 99.52%
accuracy. Moreover, our obtained experimental results show that the Loihi
neuromorphic hardware implementations achieve up to 14.67x and 4.09x reduction
in power consumption and energy, respectively, when compared to NCS2.
- Abstract(参考訳): 本稿では,ASL AlphabetとASL Digitsという2つの静的アメリカン手話(ASL)手話分類タスクのための4つのスパイクニューラルネットワーク(SNN)モデルを開発する。
SNNモデルはIntelのニューロモルフィックプラットフォームであるLoihiにデプロイされ、エッジコンピューティングデバイスであるIntel Neural Compute Stick 2 (NCS2)にデプロイされた同等のディープニューラルネットワーク(DNN)モデルと比較される。
我々は,2つのシステム間の総合的な比較を行い,精度,レイテンシ,消費電力,エネルギーについて検討した。
最高のDNNモデルはASL Alphabetデータセットで99.6%の精度を達成するが、最高のパフォーマンスのSNNモデルは99.44%の精度である。
ASL-Digitsデータセットでは、最高のSNNモデルは99.52%の精度でDNNのモデルよりも優れている。
さらに,NCS2と比較して,Loihiのニューロモルフィックハードウェア実装は消費電力とエネルギーの最大14.67倍,4.09倍の削減を実現した。
関連論文リスト
- NAS-BNN: Neural Architecture Search for Binary Neural Networks [55.058512316210056]
我々は、NAS-BNNと呼ばれる二元ニューラルネットワークのための新しいニューラルネットワーク探索手法を提案する。
我々の発見したバイナリモデルファミリーは、20Mから2Mまでの幅広い操作(OP)において、以前のBNNよりも優れていた。
さらに,対象検出タスクにおける探索されたBNNの転送可能性を検証するとともに,探索されたBNNを用いたバイナリ検出器は,MSデータセット上で31.6% mAP,370万 OPsなどの新たな最先端結果を得る。
論文 参考訳(メタデータ) (2024-08-28T02:17:58Z) - A Hybrid Neural Coding Approach for Pattern Recognition with Spiking
Neural Networks [53.31941519245432]
脳にインスパイアされたスパイクニューラルネットワーク(SNN)は、パターン認識タスクを解く上で有望な能力を示している。
これらのSNNは、情報表現に一様神経コーディングを利用する同質ニューロンに基づいている。
本研究では、SNNアーキテクチャは異種符号化方式を組み込むよう、均質に設計されるべきである、と論じる。
論文 参考訳(メタデータ) (2023-05-26T02:52:12Z) - Security-Aware Approximate Spiking Neural Networks [0.0]
AxSNNの構造的パラメータと近似レベルを2塩基勾配と2つのニューロモルフィックアタックで解析した。
我々は,AxSNNのセキュリティのための2つの新しい防御手法,すなわち精度スケーリングと近似量子化対応フィルタリングを提案する。
以上の結果から,AxSNNはAccSNNよりも敵攻撃を受けやすいが,精度スケーリングとAQFはAxSNNの堅牢性を大幅に向上することが示された。
論文 参考訳(メタデータ) (2023-01-12T19:23:15Z) - tinySNN: Towards Memory- and Energy-Efficient Spiking Neural Networks [14.916996986290902]
スパイキングニューラルネットワーク(SNN)モデルは、高い精度を提供できるため、一般的に好適である。
しかし、資源とエネルギーを制約した組込みプラットフォームにそのようなモデルを適用することは非効率である。
本稿では,SNN処理のメモリおよびエネルギー要求を最適化する小型SNNフレームワークを提案する。
論文 参考訳(メタデータ) (2022-06-17T09:40:40Z) - Training High-Performance Low-Latency Spiking Neural Networks by
Differentiation on Spike Representation [70.75043144299168]
スパイキングニューラルネットワーク(SNN)は、ニューロモルフィックハードウェア上に実装された場合、有望なエネルギー効率のAIモデルである。
非分化性のため、SNNを効率的に訓練することは困難である。
本稿では,ハイパフォーマンスを実現するスパイク表現法(DSR)の差分法を提案する。
論文 参考訳(メタデータ) (2022-05-01T12:44:49Z) - Can Deep Neural Networks be Converted to Ultra Low-Latency Spiking
Neural Networks? [3.2108350580418166]
スパイクニューラルネットワーク(SNN)は、時間とともに分散されたバイナリスパイクを介して動作する。
SNNのためのSOTAトレーニング戦略は、非スパイキングディープニューラルネットワーク(DNN)からの変換を伴う
そこで本研究では,DNNと変換SNNの誤差を最小限に抑えながら,これらの分布を正確にキャプチャする新たなトレーニングアルゴリズムを提案する。
論文 参考訳(メタデータ) (2021-12-22T18:47:45Z) - Fully Spiking Variational Autoencoder [66.58310094608002]
スパイキングニューラルネットワーク(SNN)は、超高速で超低エネルギー消費のニューロモルフィックデバイス上で動作することができる。
本研究では,SNNを用いた可変オートエンコーダ(VAE)を構築し,画像生成を実現する。
論文 参考訳(メタデータ) (2021-09-26T06:10:14Z) - Sparse Spiking Gradient Descent [2.741266294612776]
本稿では,従来の手法と同等あるいはより高精度なSNNバックプロパゲーションアルゴリズムを提案する。
本稿では,複雑性の異なる実データセットに対する本手法の有効性を示す。
論文 参考訳(メタデータ) (2021-05-18T20:00:55Z) - Progressive Tandem Learning for Pattern Recognition with Deep Spiking
Neural Networks [80.15411508088522]
スパイキングニューラルネットワーク(SNN)は、低レイテンシと高い計算効率のために、従来の人工知能ニューラルネットワーク(ANN)よりも優位性を示している。
高速かつ効率的なパターン認識のための新しいANN-to-SNN変換およびレイヤワイズ学習フレームワークを提案する。
論文 参考訳(メタデータ) (2020-07-02T15:38:44Z) - You Only Spike Once: Improving Energy-Efficient Neuromorphic Inference
to ANN-Level Accuracy [51.861168222799186]
スパイキングニューラルネットワーク(英: Spiking Neural Networks、SNN)は、神経型ネットワークの一種である。
SNNはスパースであり、重量はごくわずかであり、通常、より電力集約的な乗算および累積演算の代わりに追加操作のみを使用する。
本研究では,TTFS符号化ニューロモルフィックシステムの限界を克服することを目的としている。
論文 参考訳(メタデータ) (2020-06-03T15:55:53Z) - An Efficient Spiking Neural Network for Recognizing Gestures with a DVS
Camera on the Loihi Neuromorphic Processor [12.118084418840152]
Spiking Neural Networks(SNN)は、機械学習ベースのアプリケーションにおいて注目を浴びている。
本稿では,対応するディープニューラルネットワーク(DNN)とほぼ同じ精度のSNNの設計手法を示す。
我々のSNNは89.64%の分類精度を達成し、37のLoihiコアしか占有していない。
論文 参考訳(メタデータ) (2020-05-16T17:00:10Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。