ニューラルアーキテクチャ検索は、優れたパフォーマンスでニューラルネットワークを発見でき、ワンショットアプローチが普及しています。ワンショットアプローチでは、通常、アーキテクチャのパフォーマンスを予測する重み共有と予測子を備えたスーパーネットが必要です。ただし、以前の方法では、パフォーマンス予測子の生成に時間がかかるため、非効率的です。この目的のために、シミュレーテッドアニーリングと多変量回帰に基づく高速で説明可能な予測子で構成されるFOX-NASを提案します。私たちの方法は量子化に適していて、エッジに効率的に展開できます。さまざまなハードウェアでの実験は、FOX-NASモデルが他の一般的なニューラルネットワークアーキテクチャよりも優れていることを示しています。たとえば、FOX-NASはMobileNetV2とEfficientNet-Lite0の精度に匹敵し、エッジCPUのレイテンシーは240%と40%少なくなります。 FOX-NASは、2020年の低電力コンピュータビジョンチャレンジ(LPCVC)、DSP分類トラックの3位の勝者です。 https://lpcv.ai/competitions/2020ですべての評価結果を参照してください。検索コードと事前トレーニング済みモデルは、https://github.com/great8nctu/FOX-NASでリリースされています。
Neural architecture search can discover neural networks with good performance, and One-Shot approaches are prevalent. One-Shot approaches typically require a supernet with weight sharing and predictors that predict the performance of architecture. However, the previous methods take much time to generate performance predictors thus are inefficient. To this end, we propose FOX-NAS that consists of fast and explainable predictors based on simulated annealing and multivariate regression. Our method is quantization-friendly and can be efficiently deployed to the edge. The experiments on different hardware show that FOX-NAS models outperform some other popular neural network architectures. For example, FOX-NAS matches MobileNetV2 and EfficientNet-Lite0 accuracy with 240% and 40% less latency on the edge CPU. FOX-NAS is the 3rd place winner of the 2020 Low-Power Computer Vision Challenge (LPCVC), DSP classification track. See all evaluation results at https://lpcv.ai/competitions/2020. Search code and pre-trained models are released at https://github.com/great8nctu/FOX-NAS.