arXiv reaDer
特定の動的環境のモデリングにおける短期シナプス可塑性の最適性
Optimality of short-term synaptic plasticity in modelling certain dynamic environments
ニューロモルフィック人工知能(AI)の生物学的ニューロンとそのインシリコエミュレーションは、スパイクベースの通信や局所シナプス可塑性など、非常にエネルギー効率の高いメカニズムを使用しています。これらの神経メカニズムが効率を提供するだけなのか、それとも生物学的知性の優位性の根底にあるのかは不明なままです。ここでは、実際、ベイズの最適な予測と、ランダムではあるが継続的に変化する環境の推論、一般的な自然環境が、生物学的シナプスの特徴である短期間のスパイクタイミング依存可塑性に依存していることを厳密に証明します。さらに、可塑性によるこの動的ベイズ推定により、シミュレーションにおける大脳皮質の回路は、これまで見られなかった、非常に歪んだ動的刺激を認識することができます。驚くべきことに、これは生物学的にモデル化されたAIも導入します。これは、深層学習の複数の制限を克服し、視覚タスクで人工ニューラルネットワークを上回る最初の方法です。皮質のようなネットワークはスパイクとイベントベースであり、教師なしの局所的な可塑性のみで、小さくて狭い静的なトレーニングデータセットでトレーニングされますが、継続的なアクティブ化を伴うディープニューラルネットワークよりも、見えない、変換された、動的なデータの認識を実現します、変換データの教師あり逆伝播でトレーニングされています。これらの結果は、短期間の可塑性を高レベルの皮質機能に結び付け、自然環境に対する自然知能の最適性を示唆し、ニューロモルフィックAIを単なる効率から計算上の優位性に完全に再利用します。
Biological neurons and their in-silico emulations for neuromorphic artificial intelligence (AI) use extraordinarily energy-efficient mechanisms, such as spike-based communication and local synaptic plasticity. It remains unclear whether these neuronal mechanisms only offer efficiency or also underlie the superiority of biological intelligence. Here, we prove rigorously that, indeed, the Bayes-optimal prediction and inference of randomly but continuously transforming environments, a common natural setting, relies on short-term spike-timing-dependent plasticity, a hallmark of biological synapses. Further, this dynamic Bayesian inference through plasticity enables circuits of the cerebral cortex in simulations to recognize previously unseen, highly distorted dynamic stimuli. Strikingly, this also introduces a biologically-modelled AI, the first to overcome multiple limitations of deep learning and outperform artificial neural networks in a visual task. The cortical-like network is spiking and event-based, trained only with unsupervised and local plasticity, on a small, narrow, and static training dataset, but achieves recognition of unseen, transformed, and dynamic data better than deep neural networks with continuous activations, trained with supervised backpropagation on the transforming data. These results link short-term plasticity to high-level cortical function, suggest optimality of natural intelligence for natural environments, and repurpose neuromorphic AI from mere efficiency to computational supremacy altogether.
updated: Tue Jun 15 2021 22:14:34 GMT+0000 (UTC)
published: Tue Sep 15 2020 01:04:28 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト