arXiv reaDer
TCL:トレーニング可能なクリッピングレイヤーを使用したANNからSNNへの変換
TCL: an ANN-to-SNN Conversion with Trainable Clipping Layers
スパイキングニューラルネットワーク(SNN)は、アナログニューラルネットワーク(ANN)と比較して、SNNのイベント駆動型操作が大幅に低い電力を提供するため、エッジデバイスで有望です。 SNNを効率的にトレーニングすることは困難ですが、トレーニングされたANNをSNNに変換するための多くの手法が開発されています。ただし、変換後、SNNには精度と遅延のトレードオフ関係が存在するため、ImageNetなどの大規模なデータセットではかなりの遅延が発生します。トレードオフの問題を軽減するためのTCLという名前の手法を紹介し、SNNで250サイクルという中程度の遅延で、ImageNetの精度を73.87%(VGG-16)および70.37%(ResNet-34)にします。
Spiking-neural-networks (SNNs) are promising at edge devices since the event-driven operations of SNNs provides significantly lower power compared to analog-neural-networks (ANNs). Although it is difficult to efficiently train SNNs, many techniques to convert trained ANNs to SNNs have been developed. However, after the conversion, a trade-off relation between accuracy and latency exists in SNNs, causing considerable latency in large size datasets such as ImageNet. We present a technique, named as TCL, to alleviate the trade-off problem, enabling the accuracy of 73.87% (VGG-16) and 70.37% (ResNet-34) for ImageNet with the moderate latency of 250 cycles in SNNs.
updated: Thu Mar 25 2021 06:46:20 GMT+0000 (UTC)
published: Tue Aug 11 2020 04:20:27 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト