論文の概要: Removing the Compute Bottleneck for Event-based Visual Place Recognition with Spiking Neural Networks
- arxiv url: http://arxiv.org/abs/2610.16022v1
- Date: Mon, 12 Oct 2026 00:45:01 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-19 08:05:48.386761
- Title: Removing the Compute Bottleneck for Event-based Visual Place Recognition with Spiking Neural Networks
- Title(参考訳): スパイクニューラルネットワークを用いたイベントベースの視覚的位置認識のためのコンピュータ・ブートネックの除去
- Abstract要約: ニューロモルフィックセンシングとコンピューティングは、ロボット工学における低レイテンシと高エネルギー効率を約束する。
ほとんどのイベントベースの視覚的位置認識パイプラインは、本質的にスパースなセンサーの下流で密度の高いフレームのような計算を再導入する。
本稿では,コモディティCPU上でのイベントベースのVPRクエリを数マイクロ秒で解決する問題に対処する。
- 参考スコア(独自算出の注目度): 16.893170921147608
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Neuromorphic sensing and computing promise low latency and high energy efficiency for robotics, yet most event-based visual place recognition (VPR) pipelines reintroduce dense, frame-like computation downstream of an inherently sparse sensor, forfeiting the sensor's latency advantage. In this paper, we address the problem of resolving an event-based VPR query in tens of microseconds on a commodity CPU. We train a two-layer spiking neural network (SNN) with additive spike-timing-dependent plasticity (STDP), which drives the learned weight matrix towards a strongly bimodal distribution, amenable to aggressive magnitude pruning. At inference, our pipeline exploits this sparsity by reading only the pruned weights corresponding to the query's active pixels. As surviving weights share a near-uniform magnitude, each neuron's score reduces to an integer count of matching synapses instead of a weighted sum, lowering per-query latency. This computation is small enough to remain resident in a CPU's fast on-chip cache. On three event-based VPR benchmarks, our sparse SNN exceeds the recall of LENS, an existing event-based SNN, while reducing per-query latency by 5.5-6.2x to tens of microseconds. It matches the recall of a dense variant of our network and of the sum-of-absolute-differences (SAD) baseline, while reading 10x fewer weights than the dense variant. We further characterise how recall and latency scale with the number of active pixels and reference places. These results suggest that the sparsity of both event-based input and learned weights can already be exploited for low-latency inference on conventional processors.
- Abstract(参考訳): ニューロモルフィックセンシングとコンピューティングは、ロボット工学において低レイテンシと高エネルギー効率を約束するが、ほとんどのイベントベースの視覚的位置認識(VPR)パイプラインは、本質的にスパースなセンサーの下流で密度の高いフレームのような計算を再導入し、センサーのレイテンシの優位性を排除している。
本稿では,コモディティCPU上でのイベントベースのVPRクエリを数マイクロ秒で解決する問題に対処する。
我々は,2層スパイキングニューラルネットワーク(SNN)を付加的なスパイクタイピング依存塑性(STDP)でトレーニングし,学習した重み行列を強い双モード分布に向けて駆動し,アグレッシブ・マグニチュード・プルーニングを可能にする。
推論では、クエリのアクティブピクセルに対応するプルーニングされた重みだけを読み取ることで、この空間性を利用する。
生き残ったウェイトがほぼ一様の大きさを共有するため、各ニューロンのスコアは重み付け和の代わりにシナプスに一致する整数数に減少し、クエリ毎のレイテンシを低下させる。
この計算はCPUの高速オンチップキャッシュに留まるほど小さい。
3つのイベントベースVPRベンチマークでは、スパースSNNは既存のイベントベースSNNであるLENSのリコールを超え、クエリ毎のレイテンシは5.5-6.2xから数十マイクロ秒に短縮した。
これは、我々のネットワークの高密度な変量とSADベースラインの総和とを一致させ、高密度な変量よりも10倍少ない重量を読み取ります。
さらに、アクティブなピクセル数や参照場所の数に応じて、リコールと遅延のスケールを特徴付ける。
これらの結果から,イベントベース入力と学習重量の両方の空間性が,従来のプロセッサ上での低遅延推論に有効であることが示唆された。
関連論文リスト
- SNNF: An SNN-based Near-Sensor Noise Filter for Dynamic Vision Sensors [3.2432462489026492]
ダイナミックビジョンセンサー(DVS)は例外的なダイナミックレンジと低消費電力を示し、ビデオモノのインターネット(IoVT)におけるエッジアプリケーションに最適である。
本稿では,コンパクトなイベントベースバイナリ画像表現,並列メモリアーキテクチャ,単一層スパイキングニューラルネットワーク(SNN)を統合した近接センサBAノイズフィルタSNNFを提案する。
実装結果から、SNNFはメモリリソースとロジックリソースをそれぞれ11%と40%に削減し、毎秒29メガイベントのスループットを実現している(Meps)。
論文 参考訳(メタデータ) (2026-05-03T15:35:05Z) - Enhanced Squeezing and Faster Metrology from Layered Quantum Neural Networks [0.0]
量子貯水池コンピュータ(QRC)、量子パーセプトロン、多層量子ニューラルネットワーク(QNN)のセンシング性能の比較を行った。
すべてのモデルに対して、コヒーレントスピン準備、一軸回転ダイナミクス、弱い回転によるフィールドエンコーディング、時間反転、集団読み出しからなる標準的なメロジカルシーケンスを考察する。
以上の結果から,量子ニューラルネットワークの構造は計算だけでなく,より高速でより感度の高いスクイージング型量子センサの開発にも活用できることが示唆された。
論文 参考訳(メタデータ) (2025-12-09T21:33:22Z) - Compression and Inference of Spiking Neural Networks on Resource-Constrained Hardware [0.2226043394835212]
スパイキングニューラルネットワーク(SNN)は、連続的なアクティベーションではなく、離散的なスパイクを介して時間内に通信する。
エッジデバイス上でのSNN推論のための軽量なC言語ランタイムを提案する。
我々は,無活動ニューロンやシナプスを刺激するスパーススパイク活性を利用して,上流の畳み込み層での計算を縮小する。
論文 参考訳(メタデータ) (2025-11-15T10:02:23Z) - Efficient Deployment of Spiking Neural Networks on SpiNNaker2 for DVS Gesture Recognition Using Neuromorphic Intermediate Representation [2.649410674489787]
スパイキングニューラルネットワーク(SNN)は、推論時に非常にエネルギー効率が高い。
ダイナミックビジョンセンサー(DVS)のデータなどのイベント駆動入力を処理する能力により、エッジコンピューティングタスクへの適用性はさらに向上する。
マルチコアニューロモルフィックチップSpiNNaker2に最適化されたSNNを用いたDVSジェスチャー認識タスクの最初のベンチマークを示す。
論文 参考訳(メタデータ) (2025-04-09T10:09:29Z) - Variable Bitrate Neural Fields [75.24672452527795]
本稿では,特徴格子を圧縮し,メモリ消費を最大100倍に削減する辞書手法を提案する。
辞書の最適化をベクトル量子化オートデコーダ問題として定式化し、直接監督できない空間において、エンドツーエンドの離散神経表現を学習する。
論文 参考訳(メタデータ) (2022-06-15T17:58:34Z) - Braille Letter Reading: A Benchmark for Spatio-Temporal Pattern
Recognition on Neuromorphic Hardware [50.380319968947035]
近年の深層学習手法は,そのようなタスクにおいて精度が向上しているが,従来の組込みソリューションへの実装は依然として計算量が非常に高く,エネルギーコストも高い。
文字読み込みによるエッジにおける触覚パターン認識のための新しいベンチマークを提案する。
フィードフォワードとリカレントスパイキングニューラルネットワーク(SNN)を、サロゲート勾配の時間によるバックプロパゲーションを用いてオフラインでトレーニングし比較し、効率的な推論のためにIntel Loihimorphicチップにデプロイした。
LSTMは14%の精度で繰り返しSNNより優れており、Loihi上での繰り返しSNNは237倍のエネルギーである。
論文 参考訳(メタデータ) (2022-05-30T14:30:45Z) - Instant Neural Graphics Primitives with a Multiresolution Hash Encoding [67.33850633281803]
品質を犠牲にすることなく、より小さなネットワークを使用できる汎用的な新しい入力符号化を提案する。
小さなニューラルネットワークは、勾配降下によって値が最適化された訓練可能な特徴ベクトルの多分解能ハッシュテーブルによって拡張される。
数桁の高速化を実現し、高品質なニューラルネットワークプリミティブを数秒でトレーニングすることができる。
論文 参考訳(メタデータ) (2022-01-16T07:22:47Z) - Neural network relief: a pruning algorithm based on neural activity [47.57448823030151]
重要でない接続を非活性化する簡易な重要スコア計量を提案する。
MNIST上でのLeNetアーキテクチャの性能に匹敵する性能を実現する。
このアルゴリズムは、現在のハードウェアとソフトウェアの実装を考えるとき、FLOPを最小化するように設計されていない。
論文 参考訳(メタデータ) (2021-09-22T15:33:49Z) - Spike time displacement based error backpropagation in convolutional
spiking neural networks [0.6193838300896449]
本稿では,STiDi-BPアルゴリズムを拡張し,より深く,畳み込み型アーキテクチャに応用する。
MNISTとFashion-MNISTの2つのベンチマークに基づく画像分類タスクの評価結果から,このアルゴリズムが深部SNNに適用可能であることを確認した。
後進パスで更新される実数値重みと、フィードフォワードプロセスで使用される2値重みと、その記号と2値重みの2つの重みを持つ畳み込みSNNを考える。
論文 参考訳(メタデータ) (2021-08-31T05:18:59Z) - Learning N:M Fine-grained Structured Sparse Neural Networks From Scratch [75.69506249886622]
ディープニューラルネットワーク(DNN)におけるスパーシティは、資源制約された環境でモデルを圧縮し、加速するために広く研究されている。
本稿では,N:M細粒構造スパースネットワークのスクラッチからトレーニングを初めて行う。
論文 参考訳(メタデータ) (2021-02-08T05:55:47Z) - Efficient Integer-Arithmetic-Only Convolutional Neural Networks [87.01739569518513]
我々は従来のReLUを境界ReLUに置き換え、その減少は活性化量子化によるものであることを示す。
我々の整数ネットワークは、対応するFPNネットワークと同等の性能を発揮するが、メモリコストは1/4に過ぎず、最新のGPUでは2倍高速である。
論文 参考訳(メタデータ) (2020-06-21T08:23:03Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。