論文の概要: Spiking SiamFC++: Deep Spiking Neural Network for Object Tracking
- arxiv url: http://arxiv.org/abs/2209.12010v1
- Date: Sat, 24 Sep 2022 13:54:28 GMT
- ステータス: 処理完了
- システム内更新日: 2022-09-27 14:28:21.007120
- Title: Spiking SiamFC++: Deep Spiking Neural Network for Object Tracking
- Title(参考訳): Spiking SiamFC++: オブジェクト追跡のためのディープスパイキングニューラルネットワーク
- Authors: Shuiying Xiang, Tao Zhang, Shuqing Jiang, Yanan Han, Yahui Zhang,
Chenyang Du, Xingxing Guo, Licun Yu, Yuechun Shi and Yue Hao
- Abstract要約: スパイキングニューラルネットワーク(SNN)は生物学的に証明可能なモデルであり、高い計算能力と低消費電力の利点を示す。
本稿では,オブジェクトトラッキングのためのSNNアーキテクチャであるSpike SiamFC++を提案する。
我々の知る限り、Spking SiamFC++のパフォーマンスは、SNNベースのオブジェクトトラッキングにおける既存の最先端アプローチよりも優れています。
- 参考スコア(独自算出の注目度): 5.9864421095972125
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Spiking neural network (SNN) is a biologically-plausible model and exhibits
advantages of high computational capability and low power consumption. While
the training of deep SNN is still an open problem, which limits the real-world
applications of deep SNN. Here we propose a deep SNN architecture named Spiking
SiamFC++ for object tracking with end-to-end direct training. Specifically, the
AlexNet network is extended in the time domain to extract the feature, and the
surrogate gradient function is adopted to realize direct supervised training of
the deep SNN. To examine the performance of the Spiking SiamFC++, several
tracking benchmarks including OTB2013, OTB2015, VOT2015, VOT2016, and UAV123
are considered. It is found that, the precision loss is small compared with the
original SiamFC++. Compared with the existing SNN-based target tracker, e.g.,
the SiamSNN, the precision (succession) of the proposed Spiking SiamFC++
reaches 85.24% (64.37%), which is much higher than that of 52.78% (44.32%)
achieved by the SiamSNN. To our best knowledge, the performance of the Spiking
SiamFC++ outperforms the existing state-of-the-art approaches in SNN-based
object tracking, which provides a novel path for SNN application in the field
of target tracking. This work may further promote the development of SNN
algorithms and neuromorphic chips.
- Abstract(参考訳): スパイキングニューラルネットワーク(SNN)は生物学的に証明可能なモデルであり、高い計算能力と低消費電力の利点を示す。
ディープSNNのトレーニングは依然としてオープンな問題であるが、ディープSNNの実際の応用は制限されている。
本稿では,オブジェクトトラッキングのためのSNNアーキテクチャであるSpike SiamFC++を提案する。
具体的には、AlexNetネットワークを時間領域に拡張して特徴を抽出し、SNNの直接教師付きトレーニングを実現するために代理勾配関数を採用する。
Spiking SiamFC++の性能を調べるために、OTB2013, OTB2015, VOT2015, VOT2016, UAV123などの追跡ベンチマークが検討されている。
その結果,SiamFC++と比較して精度の低下は小さいことがわかった。
既存のSNNベースのターゲットトラッカー、例えばSiamSNNと比較して、提案されているSpike SiamFC++の精度(サクセス)は85.24%(64.37%)に達し、SiamSNNが達成した52.78%(44.32%)よりもはるかに高い。
我々の知る限り、Spking SiamFC++のパフォーマンスは、SNNベースのオブジェクトトラッキングにおける既存の最先端アプローチよりも優れており、ターゲットトラッキング分野におけるSNNアプリケーションの新しいパスを提供する。
この研究は、SNNアルゴリズムとニューロモルフィックチップの開発をさらに促進する可能性がある。
関連論文リスト
- NAS-BNN: Neural Architecture Search for Binary Neural Networks [55.058512316210056]
我々は、NAS-BNNと呼ばれる二元ニューラルネットワークのための新しいニューラルネットワーク探索手法を提案する。
我々の発見したバイナリモデルファミリーは、20Mから2Mまでの幅広い操作(OP)において、以前のBNNよりも優れていた。
さらに,対象検出タスクにおける探索されたBNNの転送可能性を検証するとともに,探索されたBNNを用いたバイナリ検出器は,MSデータセット上で31.6% mAP,370万 OPsなどの新たな最先端結果を得る。
論文 参考訳(メタデータ) (2024-08-28T02:17:58Z) - Fully Spiking Actor Network with Intra-layer Connections for
Reinforcement Learning [51.386945803485084]
エージェントが制御する多次元決定論的ポリシーを学習する必要があるタスクに焦点をあてる。
既存のスパイクベースのRL法は、SNNの出力として発火率を取り、完全に接続された層を通して連続的なアクション空間(つまり決定論的なポリシー)を表すように変換する。
浮動小数点行列操作を伴わない完全にスパイクするアクターネットワークを開発するため,昆虫に見られる非スパイク介在ニューロンからインスピレーションを得た。
論文 参考訳(メタデータ) (2024-01-09T07:31:34Z) - SNN2ANN: A Fast and Memory-Efficient Training Framework for Spiking
Neural Networks [117.56823277328803]
スパイクニューラルネットワークは、低消費電力環境における効率的な計算モデルである。
本稿では,SNNを高速かつメモリ効率で学習するためのSNN-to-ANN(SNN2ANN)フレームワークを提案する。
実験結果から,SNN2ANNをベースとしたモデルがベンチマークデータセットで良好に動作することが示された。
論文 参考訳(メタデータ) (2022-06-19T16:52:56Z) - Training High-Performance Low-Latency Spiking Neural Networks by
Differentiation on Spike Representation [70.75043144299168]
スパイキングニューラルネットワーク(SNN)は、ニューロモルフィックハードウェア上に実装された場合、有望なエネルギー効率のAIモデルである。
非分化性のため、SNNを効率的に訓練することは困難である。
本稿では,ハイパフォーマンスを実現するスパイク表現法(DSR)の差分法を提案する。
論文 参考訳(メタデータ) (2022-05-01T12:44:49Z) - Sub-bit Neural Networks: Learning to Compress and Accelerate Binary
Neural Networks [72.81092567651395]
Sub-bit Neural Networks (SNN) は、BNNの圧縮と高速化に適した新しいタイプのバイナリ量子化設計である。
SNNは、微細な畳み込みカーネル空間におけるバイナリ量子化を利用するカーネル対応最適化フレームワークで訓練されている。
ビジュアル認識ベンチマークの実験とFPGA上でのハードウェア展開は、SNNの大きな可能性を検証する。
論文 参考訳(メタデータ) (2021-10-18T11:30:29Z) - Beyond Classification: Directly Training Spiking Neural Networks for
Semantic Segmentation [5.800785186389827]
ニューラルネットワークの低消費電力代替としてスパイキングニューラルネットワーク(SNN)が登場している。
本稿では,ニューロンをスパイクしたセマンティックセグメンテーションネットワークの分類を超えて,SNNの応用について検討する。
論文 参考訳(メタデータ) (2021-10-14T21:53:03Z) - Pruning of Deep Spiking Neural Networks through Gradient Rewiring [41.64961999525415]
スパイキングニューラルネットワーク(SNN)は、その生物学的妥当性とニューロモルフィックチップの高エネルギー効率により、非常に重要視されている。
ほとんどの既存の方法は、ANNsとSNNsの違いを無視するSNNsに人工ニューラルネットワーク(ANNs)のプルーニングアプローチを直接適用する。
本稿では,ネットワーク構造を無訓練でシームレスに最適化可能な,snsの接続性と重み付けの合同学習アルゴリズムgradle rewiring (gradr)を提案する。
論文 参考訳(メタデータ) (2021-05-11T10:05:53Z) - Progressive Tandem Learning for Pattern Recognition with Deep Spiking
Neural Networks [80.15411508088522]
スパイキングニューラルネットワーク(SNN)は、低レイテンシと高い計算効率のために、従来の人工知能ニューラルネットワーク(ANN)よりも優位性を示している。
高速かつ効率的なパターン認識のための新しいANN-to-SNN変換およびレイヤワイズ学習フレームワークを提案する。
論文 参考訳(メタデータ) (2020-07-02T15:38:44Z) - Training Deep Spiking Neural Networks [0.0]
脳にインスパイアされたスパイクニューラルネットワーク(SNN)とニューロモルフィックハードウェアは、エネルギー効率を桁違いに高める可能性がある。
CIFAR100およびImagenetteオブジェクト認識データセット上で、ResNet50アーキテクチャでSNNをトレーニングすることが可能であることを示す。
訓練されたSNNは、類似のANNと比較して精度が劣るが、数桁の推論時間ステップを必要とする。
論文 参考訳(メタデータ) (2020-06-08T09:47:05Z) - An Efficient Spiking Neural Network for Recognizing Gestures with a DVS
Camera on the Loihi Neuromorphic Processor [12.118084418840152]
Spiking Neural Networks(SNN)は、機械学習ベースのアプリケーションにおいて注目を浴びている。
本稿では,対応するディープニューラルネットワーク(DNN)とほぼ同じ精度のSNNの設計手法を示す。
我々のSNNは89.64%の分類精度を達成し、37のLoihiコアしか占有していない。
論文 参考訳(メタデータ) (2020-05-16T17:00:10Z) - SiamSNN: Siamese Spiking Neural Networks for Energy-Efficient Object
Tracking [20.595208488431766]
SiamSNNは、視覚オブジェクト追跡ベンチマークであるTB2013, VOT2016, GOT-10kにおいて、短いレイテンシと低い精度の損失を達成する最初のディープSNNトラッカーである。
SiamSNNは、ニューロモルフィックチップTrueNorth上で低エネルギー消費とリアルタイムを実現する。
論文 参考訳(メタデータ) (2020-03-17T08:49:51Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。