arXiv reaDer
Spiking-YOLO: Spiking Neural Network for Energy-Efficient Object Detection
 過去10年にわたって、ディープニューラルネットワーク(DNN)はさまざまなアプリケーションで顕著なパフォーマンスを発揮してきました。より高度な問題を解決しようとするにつれて、コンピューティングおよび電力リソースに対する需要の増大が避けられなくなりました。スパイキングニューラルネットワーク(SNN)は、イベント駆動型で低電力の性質があるため、第三世代のニューラルネットワークとして幅広い関心を集めています。ただし、SNNは、主にニューロンの複雑なダイナミクスと微分不可能なスパイク操作のため、トレーニングが困難です。さらに、それらのアプリケーションは、画像分類などの比較的単純なタスクに限定されています。この研究では、より困難な回帰問題(つまり、オブジェクト検出)におけるSNNのパフォーマンス低下を調査します。綿密な分析を通じて、チャネルごとの正規化と不均衡なしきい値を持つ符号付きニューロンの2つの新しい方法を紹介します。どちらも、ディープSNNの高速かつ正確な情報伝送を提供します。その結果、Spiking-YOLOと呼ばれる最初のスパイクベースのオブジェクト検出モデルを提示します。私たちの実験は、Spiking-YOLOが、非自明なデータセットであるPASCAL VOCおよびMS COCOでTiny YOLOに匹敵する(最大98%)驚くべき結果を達成することを示しています。さらに、ニューロモーフィックチップ上のSpiking-YOLOは、Tiny YOLOの約280分の1のエネルギー消費で、従来のSNN変換方法より2.3〜4倍高速に収束します。
Over the past decade, deep neural networks (DNNs) have demonstrated remarkable performance in a variety of applications. As we try to solve more advanced problems, increasing demands for computing and power resources has become inevitable. Spiking neural networks (SNNs) have attracted widespread interest as the third-generation of neural networks due to their event-driven and low-powered nature. SNNs, however, are difficult to train, mainly owing to their complex dynamics of neurons and non-differentiable spike operations. Furthermore, their applications have been limited to relatively simple tasks such as image classification. In this study, we investigate the performance degradation of SNNs in a more challenging regression problem (i.e., object detection). Through our in-depth analysis, we introduce two novel methods: channel-wise normalization and signed neuron with imbalanced threshold, both of which provide fast and accurate information transmission for deep SNNs. Consequently, we present a first spiked-based object detection model, called Spiking-YOLO. Our experiments show that Spiking-YOLO achieves remarkable results that are comparable (up to 98%) to those of Tiny YOLO on non-trivial datasets, PASCAL VOC and MS COCO. Furthermore, Spiking-YOLO on a neuromorphic chip consumes approximately 280 times less energy than Tiny YOLO and converges 2.3 to 4 times faster than previous SNN conversion methods.
updated: Sun Nov 24 2019 16:00:31 GMT+0000 (UTC)
published: Tue Mar 12 2019 08:34:47 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト