標準の畳み込みニューラルネットワーク(CNN)の設計では、ネットワークのパフォーマンスを向上させるために、さまざまな機能を明示的にキャプチャすることの重要性に焦点を当てることはめったにありません。代わりに、ほとんどの既存の方法は、ネットワークの深さと幅を増加または調整する間接的なアプローチに従います。これにより、多くの場合、計算コストが大幅に増加します。生物学的視覚システムに触発されて、多様で適応性のある注意畳み込みネットワーク(DA ^ 2-Net)を提案します。これにより、フィードフォワードCNNは多様な機能を明示的にキャプチャし、最も有益な機能を適応的に選択して強調し、ネットワークを効率的に強化できます。パフォーマンス。 DA ^ 2-Netの計算オーバーヘッドはごくわずかであり、CNNアーキテクチャと簡単に統合できるように設計されています。さまざまなCNNアーキテクチャを使用して、CIFAR100、SVHN、ImageNetなどのベンチマークデータセットでDA ^ 2-Netを広範囲に評価しました。実験結果は、DA ^ 2-Netが非常に最小限の計算オーバーヘッドで大幅なパフォーマンスの向上を提供することを示しています。
Standard Convolutional Neural Network (CNN) designs rarely focus on the importance of explicitly capturing diverse features to enhance the network's performance. Instead, most existing methods follow an indirect approach of increasing or tuning the networks' depth and width, which in many cases significantly increases the computational cost. Inspired by a biological visual system, we propose a Diverse and Adaptive Attention Convolutional Network (DA^2-Net), which enables any feed-forward CNNs to explicitly capture diverse features and adaptively select and emphasize the most informative features to efficiently boost the network's performance. DA^2-Net incurs negligible computational overhead and it is designed to be easily integrated with any CNN architecture. We extensively evaluated DA^2-Net on benchmark datasets, including CIFAR100, SVHN, and ImageNet, with various CNN architectures. The experimental results show DA^2-Net provides a significant performance improvement with very minimal computational overhead.