論文の概要: Fast simulations of highly-connected spiking cortical models using GPUs
- arxiv url: http://arxiv.org/abs/2007.14236v3
- Date: Mon, 9 Nov 2020 17:13:33 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-06 02:19:23.873266
- Title: Fast simulations of highly-connected spiking cortical models using GPUs
- Title(参考訳): gpuを用いた高結合スパイク皮質モデルの高速シミュレーション
- Authors: Bruno Golosio, Gianmarco Tiddia, Chiara De Luca, Elena Pastorelli,
Francesco Simula, Pier Stanislao Paolucci
- Abstract要約: 本稿では,C++プログラミング言語で記述されたスパイクニューラルネットワークモデルの大規模シミュレーションのためのライブラリを提案する。
本稿では,生物活動の1秒あたりのシミュレーション時間の観点から,提案ライブラリが最先端のパフォーマンスを達成することを示す。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Over the past decade there has been a growing interest in the development of
parallel hardware systems for simulating large-scale networks of spiking
neurons. Compared to other highly-parallel systems, GPU-accelerated solutions
have the advantage of a relatively low cost and a great versatility, thanks
also to the possibility of using the CUDA-C/C++ programming languages.
NeuronGPU is a GPU library for large-scale simulations of spiking neural
network models, written in the C++ and CUDA-C++ programming languages, based on
a novel spike-delivery algorithm. This library includes simple LIF
(leaky-integrate-and-fire) neuron models as well as several multisynapse AdEx
(adaptive-exponential-integrate-and-fire) neuron models with current or
conductance based synapses, user definable models and different devices. The
numerical solution of the differential equations of the dynamics of the AdEx
models is performed through a parallel implementation, written in CUDA-C++, of
the fifth-order Runge-Kutta method with adaptive step-size control. In this
work we evaluate the performance of this library on the simulation of a
cortical microcircuit model, based on LIF neurons and current-based synapses,
and on a balanced network of excitatory and inhibitory neurons, using AdEx
neurons and conductance-based synapses. On these models, we will show that the
proposed library achieves state-of-the-art performance in terms of simulation
time per second of biological activity. In particular, using a single NVIDIA
GeForce RTX 2080 Ti GPU board, the full-scale cortical-microcircuit model,
which includes about 77,000 neurons and $3 \cdot 10^8$ connections, can be
simulated at a speed very close to real time, while the simulation time of a
balanced network of 1,000,000 AdEx neurons with 1,000 connections per neuron
was about 70 s per second of biological activity.
- Abstract(参考訳): 過去10年間で、スパイキングニューロンの大規模ネットワークをシミュレートする並列ハードウェアシステムの開発への関心が高まっている。
他の高並列システムと比較すると、GPUアクセラレーションソリューションは、CUDA-C/C++プログラミング言語を使用する可能性にもとづいて、比較的低コストで優れた汎用性を持つ。
NeuronGPUは、C++およびCUDA-C++プログラミング言語で書かれたスパイクニューラルネットワークモデルの大規模なシミュレーションのためのGPUライブラリである。
このライブラリには、単純なlif(leaky-integrate-and-fire)ニューロンモデルと複数のマルチシナプスadex(adaptive-exponential-integrate-and-fire)ニューロンモデルが含まれている。
AdExモデルの力学の微分方程式の数値解は、適応的なステップサイズ制御を持つ5階のRunge-Kutta法のCUDA-C++で記述された並列実装によって実行される。
本研究では, LIFニューロンと電流ベースシナプスをベースとした皮質微小循環モデルのシミュレーションと, AdExニューロンとコンダクタンスベースシナプスを用いて, 興奮ニューロンと抑制ニューロンのバランスの取れたネットワーク上での性能を評価する。
これらのモデルを用いて,生物活動の1秒あたりのシミュレーション時間の観点から,提案ライブラリが最先端のパフォーマンスを達成することを示す。
特に、NVIDIA GeForce RTX 2080 Tiの1つのGPUボードを使用すると、約77,000のニューロンと3ドルの10^8$接続を含むフルスケールの皮質-マイクロ回路モデルは、リアルタイムに非常に近い速度でシミュレートできる。
関連論文リスト
- Resistive Memory-based Neural Differential Equation Solver for Score-based Diffusion Model [55.116403765330084]
スコアベースの拡散のような現在のAIGC法は、迅速性と効率性の点で依然として不足している。
スコアベース拡散のための時間連続型およびアナログ型インメモリ型ニューラル微分方程式解法を提案する。
我々は180nmの抵抗型メモリインメモリ・コンピューティング・マクロを用いて,我々の解を実験的に検証した。
論文 参考訳(メタデータ) (2024-04-08T16:34:35Z) - CIMulator: A Comprehensive Simulation Platform for Computing-In-Memory
Circuit Macros with Low Bit-Width and Real Memory Materials [0.5325753548715747]
本稿では,ニューロモルフィック加速器における各種シナプスデバイスの有効性を定量化するためのシミュレーションプラットフォーム,CIMulatorを提案する。
抵抗性ランダムアクセスメモリ、強誘電体電界効果トランジスタ、揮発性静的ランダムアクセスメモリ装置などの不揮発性メモリ装置をシナプスデバイスとして選択することができる。
LeNet-5、VGG-16、C4W-1と呼ばれるカスタムCNNのような多層パーセプトロンと畳み込みニューラルネットワーク(CNN)をシミュレートし、これらのシナプスデバイスがトレーニングおよび推論結果に与える影響を評価する。
論文 参考訳(メタデータ) (2023-06-26T12:36:07Z) - Runtime Construction of Large-Scale Spiking Neuronal Network Models on
GPU Devices [0.0]
本稿では,GPUメモリ上で対話的,動的,直接的にネットワーク接続を作成する新しい手法を提案する。
我々は,2つの神経科学的なモデルを用いて,コンシューマとデータセンタのGPUによるシミュレーション性能を検証する。
ネットワーク構築時間とシミュレーション時間は、他の最先端のシミュレーション技術と同等か短い。
論文 参考訳(メタデータ) (2023-06-16T14:08:27Z) - Continuous time recurrent neural networks: overview and application to
forecasting blood glucose in the intensive care unit [56.801856519460465]
連続時間自己回帰リカレントニューラルネットワーク(Continuous Time Autoregressive Recurrent Neural Network, CTRNN)は、不規則な観測を考慮に入れたディープラーニングモデルである。
重篤なケア環境下での血糖値の確率予測へのこれらのモデルの適用を実証する。
論文 参考訳(メタデータ) (2023-04-14T09:39:06Z) - NeuralStagger: Accelerating Physics-constrained Neural PDE Solver with
Spatial-temporal Decomposition [67.46012350241969]
本稿では,NeuralStaggerと呼ばれる一般化手法を提案する。
元の学習タスクをいくつかの粗い解像度のサブタスクに分解する。
本稿では,2次元および3次元流体力学シミュレーションにおけるNeuralStaggerの適用例を示す。
論文 参考訳(メタデータ) (2023-02-20T19:36:52Z) - Intelligence Processing Units Accelerate Neuromorphic Learning [52.952192990802345]
スパイキングニューラルネットワーク(SNN)は、エネルギー消費と遅延の観点から、桁違いに改善されている。
我々は、カスタムSNN PythonパッケージsnnTorchのIPU最適化リリースを提示する。
論文 参考訳(メタデータ) (2022-11-19T15:44:08Z) - A High Throughput Generative Vector Autoregression Model for Stochastic
Synapses [0.0]
我々は,抵抗性メモリセルの電気的測定データに基づくシナプスアレイの高スループット生成モデルを開発した。
10億セルを超える配列サイズと、毎秒1億の重み更新のスループットを、30フレーム/秒の4Kビデオストリームのピクセルレートよりも上回っていることを実証した。
論文 参考訳(メタデータ) (2022-05-10T17:08:30Z) - Mapping and Validating a Point Neuron Model on Intel's Neuromorphic
Hardware Loihi [77.34726150561087]
インテルの第5世代ニューロモルフィックチップ「Loihi」の可能性について検討する。
Loihiは、脳内のニューロンをエミュレートするスパイキングニューラルネットワーク(SNN)という新しいアイデアに基づいている。
Loihiは従来のシミュレーションを非常に効率的に再現し、ネットワークが大きくなるにつれて、時間とエネルギーの両方のパフォーマンスにおいて顕著にスケールする。
論文 参考訳(メタデータ) (2021-09-22T16:52:51Z) - SEMULATOR: Emulating the Dynamics of Crossbar Array-based Analog Neural
System with Regression Neural Networks [1.370633147306388]
本稿では,深層ニューラルネットワークを用いてクロスバー型アナログコンピューティングシステムの動作をエミュレートする手法SEMULATORを提案する。
提案したニューラルアーキテクチャを用いて,実験および理論的に,ニューラル計算のためのMACユニットをエミュレートすることを示した。
論文 参考訳(メタデータ) (2021-01-19T21:08:33Z) - One-step regression and classification with crosspoint resistive memory
arrays [62.997667081978825]
高速で低エネルギーのコンピュータは、エッジでリアルタイム人工知能を実現するために要求されている。
ワンステップ学習は、ボストンの住宅のコスト予測と、MNIST桁認識のための2層ニューラルネットワークのトレーニングによって支援される。
結果は、クロスポイントアレイ内の物理計算、並列計算、アナログ計算のおかげで、1つの計算ステップで得られる。
論文 参考訳(メタデータ) (2020-05-05T08:00:07Z) - CSM-NN: Current Source Model Based Logic Circuit Simulation -- A Neural
Network Approach [5.365198933008246]
CSM-NNは、最適化されたニューラルネットワーク構造と処理アルゴリズムを備えたスケーラブルなシミュレーションフレームワークである。
実験によると、CSM-NNはCPU上で動作する最先端のソースモデルベースのシミュレータと比較して、シミュレーション時間を最大6倍に短縮する。
CSM-NNはまた、HSPICEと比較して2%以下の誤差で高い精度のレベルを提供する。
論文 参考訳(メタデータ) (2020-02-13T00:29:44Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。