arXiv reaDer
スパイキングニューラルネットワークをトレーニングするためのニューロモルフィックデータ拡張
Neuromorphic Data Augmentation for Training Spiking Neural Networks
スパイキングニューラルネットワーク(SNN)を使用したイベントベースのデータセットでのニューロモルフィックインテリジェンスの開発は、最近多くの研究の注目を集めています。ただし、イベントベースのデータセットのサイズが限られているため、SNNは過剰適合および不安定な収束を起こしやすくなります。この問題は、以前の学術研究では未踏のままです。この一般化のギャップを最小限に抑えるために、SNNトレーニングを大幅に安定させ、トレーニングとテストのパフォーマンス間の一般化のギャップを減らすことを目的として、イベントベースのデータセット用に特別に設計された幾何学的拡張のファミリーであるニューロモルフィックデータ拡張(NDA)を提案します。提案された方法は単純であり、既存のSNNトレーニングパイプラインと互換性があります。提案された拡張を使用して、初めて、SNNの教師なし対照学習の実現可能性を示します。私たちは、一般的なニューロモルフィックビジョンのベンチマークについて包括的な実験を行い、NDAが以前の最先端の結果よりも大幅に改善されることを示しています。たとえば、NDAベースのSNNは、CIFAR10-DVSとN-Caltech 101の精度をそれぞれ10.1%と13.7%向上させます。
Developing neuromorphic intelligence on event-based datasets with spiking neural networks (SNNs) has recently attracted much research attention. However, the limited size of event-based datasets makes SNNs prone to overfitting and unstable convergence. This issue remains unexplored by previous academic works. In an effort to minimize this generalization gap, we propose neuromorphic data augmentation (NDA), a family of geometric augmentations specifically designed for event-based datasets with the goal of significantly stabilizing the SNN training and reducing the generalization gap between training and test performance. The proposed method is simple and compatible with existing SNN training pipelines. Using the proposed augmentation, for the first time, we demonstrate the feasibility of unsupervised contrastive learning for SNNs. We conduct comprehensive experiments on prevailing neuromorphic vision benchmarks and show that NDA yields substantial improvements over previous state-of-the-art results. For example, NDA-based SNN achieves accuracy gain on CIFAR10-DVS and N-Caltech 101 by 10.1% and 13.7%, respectively.
updated: Fri Mar 11 2022 18:17:19 GMT+0000 (UTC)
published: Fri Mar 11 2022 18:17:19 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト