arXiv reaDer
加重ニューロン割り当てによる視覚的場所認識のためのスパイキングニューラルネットワーク
Spiking Neural Networks for Visual Place Recognition via Weighted Neuronal Assignments
スパイキングニューラルネットワーク(SNN)は、エネルギー効率や低遅延などの魅力的な潜在的な利点と、イベントスパイクの微分不可能な性質などの課題の両方を提供します。この分野の初期の研究の多くは、ディープニューラルネットワークを同等のSNNに変換しましたが、この変換アプローチは、ゼロから開発されたSNNベースのアプローチの利点の一部を潜在的に打ち消します。高性能SNNの有望な分野の1つは、テンプレートマッチングと画像認識です。この調査では、視覚的場所認識(VPR)タスク用の最初の高性能SNNを紹介します。クエリ画像が与えられると、SNNは参照画像のリストから最も近い一致を見つける必要があります。この新しいシステムの中核となるのは、単一の場所をエンコードするニューロンをアップウェイトし、複数の異なる参照場所に応答する「あいまいな」ニューロンをダウンウェイトすることによって、あいまいな情報に基づく顕著性の形式を実装する新しい割り当てスキームです。挑戦的なNordland、Oxford RobotCar、SPEDTest、Synthia、およびSt Luciaデータセットに関する一連の実験で、SNNが最先端および古典的な手法に匹敵するVPRパフォーマンスを達成し、パフォーマンスが優雅に低下することを示します。参照場所の数が増えています。私たちの結果は、堅牢でエネルギー効率が高く、低遅延のロボットのローカリゼーションを提供できるSNNに向けた重要なマイルストーンを提供します。
Spiking neural networks (SNNs) offer both compelling potential advantages, including energy efficiency and low latencies and challenges including the non-differentiable nature of event spikes. Much of the initial research in this area has converted deep neural networks to equivalent SNNs, but this conversion approach potentially negates some of the advantages of SNN-based approaches developed from scratch. One promising area for high-performance SNNs is template matching and image recognition. This research introduces the first high-performance SNN for the Visual Place Recognition (VPR) task: given a query image, the SNN has to find the closest match out of a list of reference images. At the core of this new system is a novel assignment scheme that implements a form of ambiguity-informed salience, by up-weighting single-place-encoding neurons and down-weighting "ambiguous" neurons that respond to multiple different reference places. In a range of experiments on the challenging Nordland, Oxford RobotCar, SPEDTest, Synthia, and St Lucia datasets, we show that our SNN achieves comparable VPR performance to state-of-the-art and classical techniques, and degrades gracefully in performance with an increasing number of reference places. Our results provide a significant milestone towards SNNs that can provide robust, energy-efficient, and low latency robot localization.
updated: Thu Feb 10 2022 01:54:33 GMT+0000 (UTC)
published: Tue Sep 14 2021 05:40:40 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト