arXiv reaDer
EfficientNet: 畳み込みニューラルネットワークのモデル・スケーリングを再考する
EfficientNet: Rethinking Model Scaling for Convolutional Neural Networks
たたみ込みニューラルネットワーク(ConvNets)は、通常、固定のリソースバジェットで開発され、より多くのリソースが利用可能な場合は、精度を高めるためにスケールアップされます。このホワイトペーパーでは、モデルのスケーリングを体系的に調査し、ネットワークの深さ、幅、および解像度を慎重にバランスさせることでパフォーマンスが向上することを確認します。この観察に基づいて、シンプルながら非常に効果的な複合係数を使用して、深さ/幅/解像度のすべての次元を均一にスケーリングする新しいスケーリング方法を提案します。 MobileNetとResNetのスケールアップにおけるこの方法の有効性を示します。さらに進むために、ニューラルアーキテクチャ検索を使用して新しいベースラインネットワークを設計し、それをスケールアップして、EfficientNetsと呼ばれるモデルのファミリを取得します。特に、当社のEfficientNet-B7は、ImageNetで最先端の84.3%のトップ1の精度を達成し、既存の最高のConvNetよりも8.4倍小さく、推論で6.1倍高速です。私たちのEfficientNetsは、CIFAR-100(91.7%)、Flowers(98.8%)、およびその他の3つの転送学習データセットで、十分に転送し、最先端の精度を達成しています。ソースコードはhttps://github.com/tensorflow/tpu/tree/master/models/official/efficientnetにあります。
EfficientNet: 畳み込みニューラルネットワークのモデル・スケーリングを再考する 畳み込みニューラルネットワーク(ConvNets)は、一般的に固定されたリソース予算で開発され、より多くのリソースが利用可能になった場合に精度を高めるためにスケールアップされる。本論文では、モデルのスケーリングを系統的に研究し、ネットワークの深さ、幅、および解像度のバランスを慎重に取ることで、より良い性能が得られることを明らかにした。この結果に基づき、シンプルかつ効果的な複合係数を用いて、深さ/幅/解像度のすべての次元を一様にスケーリングする新しいスケーリング手法を提案する。この手法の有効性をMobileNetsとResNetのスケーリングで実証した。さらに、ニューラル・アーキテクチャ・サーチを用いて新しいベースライン・ネットワークを設計し、それをスケールアップすることで、従来のConvNetsよりもはるかに優れた精度と効率を実現するEfficientNetsと呼ばれるモデル群を得た。特に、EfficientNet-B7は、ImageNetにおいて84.3%のトップ1精度を達成したが、既存の最良のConvNetと比較して、8.4倍のサイズと6.1倍の推論速度を実現している。また、CIFAR-100 (91.7%)、Flowers (98.8%)、その他3つの転移学習データセットにおいても、我々のEfficientNetは、桁違いに少ないパラメータで最先端の精度を達成している。ソースコードは https://github.com/tensorflow/tpu/tree/master/models/official/efficientnet にある。
updated: Fri Sep 11 2020 05:08:01 GMT+0000 (UTC)
published: Tue May 28 2019 17:05:32 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト