arXiv reaDer
Hybrid Composition with IdleBlock: More Efficient Networks for Image Recognition
 ブロック内の接続を自然にプルーニングする新しいビルディングブロックIdleBlockを提案します。 IdleBlockを完全に活用するために、最先端のネットワークでの単調なデザインの伝統を破り、IdleBlockでハイブリッド構成を導入します。最も効率的なネットワークの2つであるMobileNet v3とEfficientNet-B0のハイブリッド構成を研究しています。ニューラルアーキテクチャ検索なしで、ハイブリッド構成デザインを備えたより深い「MobileNet v3」は、人間の専門家またはニューラルアーキテクチャ検索アルゴリズムによって設計されたすべての最先端の画像認識ネットワークを凌possiblyする可能性があります。同様に、ハイブリッド化されたEfficientNet-B0ネットワークは、同様の計算予算を備えた従来の最先端のネットワークよりも効率的です。これらの結果は、ネットワーク設計およびニューラルアーキテクチャ検索の新しい、よりシンプルで効率的な方向性を示唆しています。
We propose a new building block, IdleBlock, which naturally prunes connections within the block. To fully utilize the IdleBlock we break the tradition of monotonic design in state-of-the-art networks, and introducing hybrid composition with IdleBlock. We study hybrid composition on MobileNet v3 and EfficientNet-B0, two of the most efficient networks. Without any neural architecture search, the deeper "MobileNet v3" with hybrid composition design surpasses possibly all state-of-the-art image recognition network designed by human experts or neural architecture search algorithms. Similarly, the hybridized EfficientNet-B0 networks are more efficient than previous state-of-the-art networks with similar computation budgets. These results suggest a new simpler and more efficient direction for network design and neural architecture search.
updated: Tue Nov 19 2019 22:09:11 GMT+0000 (UTC)
published: Tue Nov 19 2019 22:09:11 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト