arXiv reaDer
フィルタ分散テンプレートを使用した効率的な畳み込みネットワークモデルに向けて
Towards Efficient Convolutional Network Models with Filter Distribution Templates
特徴マップが減少したときに、より深い層でフィルターの数を増やすことは、畳み込みネットワーク設計で広く採用されているパターンです。これは、古典的なCNNアーキテクチャーおよび自動検出モデルで見つけることができます。 CNS法でさえ、一般に、このピラミッド型パターンから派生した乗数の選択を調査します。 VGGおよびResNetアーキテクチャーのフィルターの元のピラミッド型分布の実装が簡単で、直感的で積極的なバリエーションで構成されるテンプレートの小さなセットを導入することにより、この慣行に逆らいます。 CIFAR、CINIC10、およびTinyImagenetデータセットでの実験は、テンプレートによって生成されたモデルが、パラメーターとメモリの必要性が少ないという点でより効率的であることを示しています。
Increasing number of filters in deeper layers when feature maps are decreased is a widely adopted pattern in convolutional network design. It can be found in classical CNN architectures and in automatic discovered models. Even CNS methods commonly explore a selection of multipliers derived from this pyramidal pattern. We defy this practice by introducing a small set of templates consisting of easy to implement, intuitive and aggressive variations of the original pyramidal distribution of filters in VGG and ResNet architectures. Experiments on CIFAR, CINIC10 and TinyImagenet datasets show that models produced by our templates, are more efficient in terms of fewer parameters and memory needs.
updated: Sat Apr 17 2021 04:51:29 GMT+0000 (UTC)
published: Sat Apr 17 2021 04:51:29 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト