arXiv reaDer
時空間フラグメントを使用したニューロモーフィック データでのロバスト スパイキング ニューラル ネットワークのトレーニング
Training Robust Spiking Neural Networks on Neuromorphic Data with Spatiotemporal Fragments
ニューロモルフィック ビジョン センサー (イベント カメラ) は、スパイク ニューラル ネットワーク (SNN) に本質的に適しており、この生体模倣モデルに新しいニューロモルフィック ビジョン データを提供します。時空間特性のため、これらのカメラの型にはまらない視覚信号を処理するには、新しいデータ拡張が必要です。この論文では、新しいEvent SpatioTemporal Fragments (ESTF)拡張方法を提案します。時空間イベント ストリームのフラグメントをドリフトまたは反転させて明るさの変動の乱れをシミュレートすることで、ニューロモルフィック データの連続性を維持し、より堅牢なスパイキング ニューラル ネットワークを実現します。一般的なニューロモルフィック データセットに対して広範な実験が行われます。 ESTF は、純粋な幾何学的変換を大幅に改善し、他のイベント データ拡張方法よりも優れていることがわかりました。 ESTF を使用した SNN が、CIFAR10-DVS データセットで 83.9% という最先端の精度を達成していることは注目に値します。
Neuromorphic vision sensors (event cameras) are inherently suitable for spiking neural networks (SNNs) and provide novel neuromorphic vision data for this biomimetic model. Due to the spatiotemporal characteristics, novel data augmentations are required to process the unconventional visual signals of these cameras. In this paper, we propose a novel Event SpatioTemporal Fragments (ESTF) augmentation method. It preserves the continuity of neuromorphic data by drifting or inverting fragments of the spatiotemporal event stream to simulate the disturbance of brightness variations, leading to more robust spiking neural networks. Extensive experiments are performed on prevailing neuromorphic datasets. It turns out that ESTF provides substantial improvements over pure geometric transformations and outperforms other event data augmentation methods. It is worth noting that the SNNs with ESTF achieve the state-of-the-art accuracy of 83.9% on the CIFAR10-DVS dataset.
updated: Tue Mar 14 2023 02:52:54 GMT+0000 (UTC)
published: Sun Jul 24 2022 04:23:56 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト