arXiv reaDer
畳み込みニューラルネットワークのための生物学的に触発された意味論的横方向接続性
Biologically Inspired Semantic Lateral Connectivity for Convolutional Neural Networks
横方向の接続は、非常に類似した機能に対しても識別可能なニューロン応答をサポートすることにより、視覚野の感覚処理に重要な役割を果たします。現在の作業では、フィルタードメインに沿って生物学的に触発されたメキシコの帽子の横方向の接続プロファイルを確立すると、トレーニング可能なネットワークパラメーターを追加せずにさまざまな軽量畳み込みニューラルネットワークの分類精度を大幅に向上できることを示します。さらに、変調されたフィルターの活性化の定常分布を分析的に決定することが可能であり、それによって時間的ダイナミクスのモデル化に漸化式を使用することを回避できることを示します。さらに、メキシコの帽子の接続性プロファイルには、初期の視覚野における特徴選択性の地形的構成に似た順序でフィルターを順序付ける効果があることを明らかにします。順序付けられたフィルターシーケンスでは、このプロファイルはフィルターのチューニングカーブをシャープにします。
Lateral connections play an important role for sensory processing in visual cortex by supporting discriminable neuronal responses even to highly similar features. In the present work, we show that establishing a biologically inspired Mexican hat lateral connectivity profile along the filter domain can significantly improve the classification accuracy of a variety of lightweight convolutional neural networks without the addition of trainable network parameters. Moreover, we demonstrate that it is possible to analytically determine the stationary distribution of modulated filter activations and thereby avoid using recurrence for modeling temporal dynamics. We furthermore reveal that the Mexican hat connectivity profile has the effect of ordering filters in a sequence resembling the topographic organization of feature selectivity in early visual cortex. In an ordered filter sequence, this profile then sharpens the filters' tuning curves.
updated: Thu May 20 2021 15:24:42 GMT+0000 (UTC)
published: Thu May 20 2021 15:24:42 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト