arXiv reaDer
MCドロップアウトによるスパイキングニューラルネットワークにおける効率的な不確実性推定
Efficient Uncertainty Estimation in Spiking Neural Networks via MC-dropout
スパイク ニューラル ネットワーク (SNN) は、生物学的ニューロンのまばらなイベント駆動型通信のモデルとして注目を集めており、ニューロモルフィック ハードウェアにおけるエネルギー効率の高いアプリケーションの可能性が高まっていることを示しています。従来の人工ニューラル ネットワーク (ANN) と同様に、予測の不確実性は、自動運転車、医療診断、高頻度取引など、リスクの高いアプリケーションでの意思決定にとって重要です。しかし、SNN における不確実性推定の議論は限られ、人工ニューラル ネットワーク (ANN) における不確実性推定のアプローチは SNN に直接適用できません。ここでは、SNN の不確実性推定のための効率的なモンテカルロ (MC) ドロップアウト ベースのアプローチを提案します。私たちのアプローチは、SNN の時間ステップ メカニズムを利用して、トレーニングと推論中に大きなオーバーヘッドを導入することなく、計算効率の高い方法で MC ドロップアウトを有効にし、高い精度と不確実性の品質を実証します。
Spiking neural networks (SNNs) have gained attention as models of sparse and event-driven communication of biological neurons, and as such have shown increasing promise for energy-efficient applications in neuromorphic hardware. As with classical artificial neural networks (ANNs), predictive uncertainties are important for decision making in high-stakes applications, such as autonomous vehicles, medical diagnosis, and high frequency trading. Yet, discussion of uncertainty estimation in SNNs is limited, and approaches for uncertainty estimation in artificial neural networks (ANNs) are not directly applicable to SNNs. Here, we propose an efficient Monte Carlo(MC)-dropout based approach for uncertainty estimation in SNNs. Our approach exploits the time-step mechanism of SNNs to enable MC-dropout in a computationally efficient manner, without introducing significant overheads during training and inference while demonstrating high accuracy and uncertainty quality.
updated: Thu Apr 20 2023 10:05:57 GMT+0000 (UTC)
published: Thu Apr 20 2023 10:05:57 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト