arXiv reaDer
畳み込みニューラル ネットワークにおけるグローバル/ローカル処理
Global-Local Processing in Convolutional Neural Networks
畳み込みニューラル ネットワーク (CNN) は、画像処理の課題に対して優れたパフォーマンスを達成しました。実際、CNN は、典型的に発達する人間の脳構造をミクロレベル (人工ニューロン) で模倣します。同時に、マクロアーキテクチャ(高レベルの認知)における人間の自然な視覚知覚を模倣することから距離を置きます。最近、CNN はローカルな特徴に大きく偏っており、入力のグローバルな側面を検出できないことが調査されました。それにもかかわらず、文献はこの問題に関して限られた手がかりを提供しています。この目的を達成するために、人間の瞳孔の無意識の行動にヒントを得た、シンプルかつ効果的なソリューションを提案します。私たちは、入力サンプルの全体的な特徴 (つまり、全体的な特徴) を学習してキャプチャするための Global Advantage Stream (GAS) と呼ばれる単純なモジュールを考案しました。次に、GAS 機能は、グローバル/ローカル処理 (GLP) モデルと呼ばれるプラグ アンド プレイ コンポーネントとして CNN ネットワークと結合されました。実験結果は、このストリームにより、わずかな追加の計算/時間負荷で精度が向上し、ネットワークが敵対的攻撃に対してより堅牢になることが確認されています。さらに、モデルの解釈を調査すると、モデルが健康な人間の知覚システムに似た、より全体的な表現を学習していることがわかります。
Convolutional Neural Networks (CNNs) have achieved outstanding performance on image processing challenges. Actually, CNNs imitate the typically developed human brain structures at the micro-level (Artificial neurons). At the same time, they distance themselves from imitating natural visual perception in humans at the macro architectures (high-level cognition). Recently it has been investigated that CNNs are highly biased toward local features and fail to detect the global aspects of their input. Nevertheless, the literature offers limited clues on this problem. To this end, we propose a simple yet effective solution inspired by the unconscious behavior of the human pupil. We devise a simple module called Global Advantage Stream (GAS) to learn and capture the holistic features of input samples (i.e., the global features). Then, the GAS features were combined with a CNN network as a plug-and-play component called the Global/Local Processing (GLP) model. The experimental results confirm that this stream improves the accuracy with an insignificant additional computational/temporal load and makes the network more robust to adversarial attacks. Furthermore, investigating the interpretation of the model shows that it learns a more holistic representation similar to the perceptual system of healthy humans
updated: Wed Jun 14 2023 08:08:08 GMT+0000 (UTC)
published: Wed Jun 14 2023 08:08:08 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト