論文の概要: End-to-End Memristive HTM System for Pattern Recognition and Sequence
Prediction
- arxiv url: http://arxiv.org/abs/2006.11958v1
- Date: Mon, 22 Jun 2020 01:12:14 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-18 06:14:36.926826
- Title: End-to-End Memristive HTM System for Pattern Recognition and Sequence
Prediction
- Title(参考訳): パターン認識とシーケンス予測のための終端中間HTMシステム
- Authors: Abdullah M. Zyarah, Kevin Gomez, and Dhireesha Kudithipudi
- Abstract要約: エッジ上の時間情報を処理するニューロモルフィックシステムを提案する。
提案アーキテクチャは、実世界のストリーミングデータを予測するためにベンチマークされる。
システムは3.46倍のレイテンシ削減と77.02倍の消費電力削減を提供する。
- 参考スコア(独自算出の注目度): 4.932130498861988
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Neuromorphic systems that learn and predict from streaming inputs hold
significant promise in pervasive edge computing and its applications. In this
paper, a neuromorphic system that processes spatio-temporal information on the
edge is proposed. Algorithmically, the system is based on hierarchical temporal
memory that inherently offers online learning, resiliency, and fault tolerance.
Architecturally, it is a full custom mixed-signal design with an underlying
digital communication scheme and analog computational modules. Therefore, the
proposed system features reconfigurability, real-time processing, low power
consumption, and low-latency processing. The proposed architecture is
benchmarked to predict on real-world streaming data. The network's mean
absolute percentage error on the mixed-signal system is 1.129X lower compared
to its baseline algorithm model. This reduction can be attributed to device
non-idealities and probabilistic formation of synaptic connections. We
demonstrate that the combined effect of Hebbian learning and network sparsity
also plays a major role in extending the overall network lifespan. We also
illustrate that the system offers 3.46X reduction in latency and 77.02X
reduction in power consumption when compared to a custom CMOS digital design
implemented at the same technology node. By employing specific low power
techniques, such as clock gating, we observe 161.37X reduction in power
consumption.
- Abstract(参考訳): ストリーミング入力から学び、予測するニューロモルフィックシステムは、広く普及するエッジコンピューティングとそのアプリケーションにおいて大きな可能性を秘めている。
本稿では,エッジ上の時空間情報を処理する神経形態システムを提案する。
アルゴリズム的には、オンライン学習、レジリエンス、フォールトトレランスを本質的に提供する階層的時間記憶に基づいている。
アーキテクチャ的には、デジタル通信スキームとアナログ計算モジュールを備えた、完全にカスタムな複合信号設計である。
そこで本システムでは,再構成性,リアルタイム処理,低消費電力,低遅延処理を特徴とする。
提案アーキテクチャは、実世界のストリーミングデータを予測するためにベンチマークされる。
混合信号系におけるネットワークの平均絶対パーセンテージ誤差は、ベースラインアルゴリズムモデルよりも1.129倍低い。
この減少は、デバイス非理想性とシナプス接続の確率的形成に起因する。
ヘビー学習とネットワークスパーシティの併用効果は,ネットワーク全体の寿命を延ばす上でも重要な役割を担っている。
また、同じ技術ノードで実装されたカスタムcmosデジタル設計と比較して、レイテンシの3.46倍、消費電力の77.02倍削減できることを示した。
クロックゲーティングなどの特定の低消費電力技術を用いて、消費電力の161.37倍削減を観測する。
関連論文リスト
- Task-Oriented Real-time Visual Inference for IoVT Systems: A Co-design Framework of Neural Networks and Edge Deployment [61.20689382879937]
タスク指向エッジコンピューティングは、データ分析をエッジにシフトすることで、この問題に対処する。
既存の手法は、高いモデル性能と低いリソース消費のバランスをとるのに苦労している。
ニューラルネットワークアーキテクチャを最適化する新しい協調設計フレームワークを提案する。
論文 参考訳(メタデータ) (2024-10-29T19:02:54Z) - Time-Series Forecasting and Sequence Learning Using Memristor-based Reservoir System [2.6473021051027534]
我々は,効率的な時間的データ処理とオンライン学習を兼ね備えたmemristorベースのエコー状態ネットワークアクセラレータを開発した。
提案した設計は、負荷エネルギー消費と気象条件の予測など、実世界のタスクを含む様々なデータセットを用いてベンチマークされる。
このシステムはデバイス故障に対して10%以下で合理的な堅牢性を示すことが観察された。
論文 参考訳(メタデータ) (2024-05-22T05:07:56Z) - Efficient and accurate neural field reconstruction using resistive memory [52.68088466453264]
デジタルコンピュータにおける従来の信号再構成手法は、ソフトウェアとハードウェアの両方の課題に直面している。
本稿では,スパース入力からの信号再構成のためのソフトウェア・ハードウェア協調最適化を用いた体系的アプローチを提案する。
この研究は、AI駆動の信号復元技術を進歩させ、将来の効率的で堅牢な医療AIと3Dビジョンアプリケーションへの道を開く。
論文 参考訳(メタデータ) (2024-04-15T09:33:09Z) - Neuromorphic Split Computing with Wake-Up Radios: Architecture and Design via Digital Twinning [97.99077847606624]
本研究は,遠隔・無線接続型NPUからなる分割計算機システムに,覚醒無線機構を組み込んだ新しいアーキテクチャを提案する。
覚醒無線に基づくニューロモルフィックスプリットコンピューティングシステムの設計における重要な課題は、検知、覚醒信号検出、意思決定のためのしきい値の選択である。
論文 参考訳(メタデータ) (2024-04-02T10:19:04Z) - DYNAP-SE2: a scalable multi-core dynamic neuromorphic asynchronous
spiking neural network processor [2.9175555050594975]
我々は、リアルタイムイベントベーススパイキングニューラルネットワーク(SNN)をプロトタイピングするための、脳にインスパイアされたプラットフォームを提案する。
提案システムは, 短期可塑性, NMDA ゲーティング, AMPA拡散, ホメオスタシス, スパイク周波数適応, コンダクタンス系デンドライトコンパートメント, スパイク伝達遅延などの動的および現実的なニューラル処理現象の直接エミュレーションを支援する。
異なる生物学的に可塑性のニューラルネットワークをエミュレートする柔軟性と、個体群と単一ニューロンの信号の両方をリアルタイムで監視する能力により、基礎研究とエッジコンピューティングの両方への応用のための複雑なニューラルネットワークモデルの開発と検証が可能になる。
論文 参考訳(メタデータ) (2023-10-01T03:48:16Z) - Spatio-Temporal Deep Learning-Assisted Reduced Security-Constrained Unit
Commitment [0.5076419064097734]
SCUC(Security-Constrained Unit commitment)は、電力系統の日頭スケジューリングと市場浄化に使用される計算上の複雑なプロセスである。
本稿では,制約の空間的相関と時間的相関を本質的に考慮した,電力系統履歴データのパターンの学習に先進機械学習(ML)モデルを用いる。
ST関連MLモデルはグラフニューラルネットワーク(GNN)を考慮して空間相関を理解するために訓練される一方、時間列は長期記憶(LSTM)ネットワークを用いて研究される。
論文 参考訳(メタデータ) (2023-06-02T14:31:24Z) - Biologically Plausible Learning on Neuromorphic Hardware Architectures [27.138481022472]
ニューロモルフィックコンピューティング(Neuromorphic Computing)は、アナログメモリの計算によってこの不均衡に直面している新興パラダイムである。
この研究は、異なる学習アルゴリズムがCompute-In-Memoryベースのハードウェアに与える影響を初めて比較し、その逆も行った。
論文 参考訳(メタデータ) (2022-12-29T15:10:59Z) - Continual Spatio-Temporal Graph Convolutional Networks [87.86552250152872]
時空間グラフ畳み込みニューラルネットワークを連続推論ネットワークとして再構成する。
オンライン推論において、最大109倍の時間複雑性、26倍のハードウェアアクセラレーション、最大割り当てメモリの最大52%の削減を観測した。
論文 参考訳(メタデータ) (2022-03-21T14:23:18Z) - SignalNet: A Low Resolution Sinusoid Decomposition and Estimation
Network [79.04274563889548]
本稿では,正弦波数を検出するニューラルネットワークアーキテクチャであるSignalNetを提案する。
基礎となるデータ分布と比較して,ネットワークの結果を比較するための最悪の学習しきい値を導入する。
シミュレーションでは、我々のアルゴリズムは常に3ビットデータのしきい値を超えることができるが、しばしば1ビットデータのしきい値を超えることはできない。
論文 参考訳(メタデータ) (2021-06-10T04:21:20Z) - An error-propagation spiking neural network compatible with neuromorphic
processors [2.432141667343098]
本稿では,局所的な重み更新機構を用いたバックプロパゲーションを近似したスパイクに基づく学習手法を提案する。
本稿では,重み更新機構による誤り信号のバックプロパゲートを可能にするネットワークアーキテクチャを提案する。
この研究は、超低消費電力混合信号ニューロモルフィック処理系の設計に向けた第一歩である。
論文 参考訳(メタデータ) (2021-04-12T07:21:08Z) - Neural Architecture Search For LF-MMI Trained Time Delay Neural Networks [61.76338096980383]
TDNN(State-of-the-the-art Factored Time delay Neural Network)の2種類のハイパーパラメータを自動的に学習するために、さまざまなニューラルネットワークサーチ(NAS)技術が使用されている。
DARTSメソッドはアーキテクチャ選択とLF-MMI(格子のないMMI)TDNNトレーニングを統合する。
300時間のSwitchboardコーパスで行われた実験では、自動構成システムはベースラインLF-MMI TDNNシステムより一貫して優れていることが示唆された。
論文 参考訳(メタデータ) (2020-07-17T08:32:11Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。