arXiv reaDer
Rethinking the Number of Channels for the Convolutional Neural Network
  自動ニューラルアーキテクチャ検索の最新のアルゴリズムは優れた性能を発揮しますが、畳み込みニューラルネットワークのチャネル数を効果的に設計し、計算量を削減できるものはほとんどありません。本稿では、ニューラルアーキテクチャの接続ではなく、ネットワークの幅に特化した効率的な自動アーキテクチャ検索の手法を提案します。私たちの方法である機能保存に基づく機能的にインクリメンタル検索は、ターゲットネットワークのパラメーターの数を制御しながら、チャンネルの数を迅速に探索します。 CIFAR-10およびCIFAR-100分類では、最小限の計算リソース(0.4〜1.3 GPU-days)を使用する方法により、ネットワークの幅のより効率的なルールを発見し、CIFAR-10およびa〜2.33で約0.5%精度を向上させることができますパラメーターの数が少ないCIFAR-100の%。特に、我々の方法は、ほぼすべての畳み込みニューラルネットワークのチャネル数を迅速に探索するのに適しています。
Latest algorithms for automatic neural architecture search perform remarkable but few of them can effectively design the number of channels for convolutional neural networks and consume less computational efforts. In this paper, we propose a method for efficient automatic architecture search which is special to the widths of networks instead of the connections of neural architecture. Our method, functionally incremental search based on function-preserving, will explore the number of channels rapidly while controlling the number of parameters of the target network. On CIFAR-10 and CIFAR-100 classification, our method using minimal computational resources (0.4~1.3 GPU-days) can discover more efficient rules of the widths of networks to improve the accuracy by about 0.5% on CIFAR-10 and a~2.33% on CIFAR-100 with fewer number of parameters. In particular, our method is suitable for exploring the number of channels of almost any convolutional neural network rapidly.
updated: Wed Sep 04 2019 15:09:22 GMT+0000 (UTC)
published: Wed Sep 04 2019 15:09:22 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト