近年、困難な認識タスクで最先端のパフォーマンスを向上させるために、無数の新しい畳み込みネットワークアーキテクチャが開発されてきました。計算リソースが向上するにつれて、既存の設計を効率的にスケールアップし、ニューラルアーキテクチャ検索(NAS)アルゴリズムを使用して新しいアーキテクチャを生成することに多大な努力が払われてきました。ネットワークトポロジはモデルのパフォーマンスにとって重要な要素であることが証明されていますが、推論時にトポロジを静的に保つことで、大幅な向上がテーブルに残されていることを示しています。スケールの変動などの課題があるため、トレーニングデータセット全体で適切に機能するように構成された静的モデルが、すべてのテストデータを処理するように最適に構成されているとは限りません。この作業では、推論時間動的モデルのエキサイティングな可能性を明らかにしようとしています。推論時に4つのレイヤーだけで構成を動的に変更できるようにすることで、ResNet-50のような既存の既製モデルがImageNetで95%を超える精度を実現できることを示します。このレベルのパフォーマンスは、現在、パラメーターが20倍以上あり、トレーニング手順が大幅に複雑なモデルのパフォーマンスを上回っています。
Over recent years, a myriad of novel convolutional network architectures have been developed to advance state-of-the-art performance on challenging recognition tasks. As computational resources improve, a great deal of effort has been placed in efficiently scaling up existing designs and generating new architectures with Neural Architecture Search (NAS) algorithms. While network topology has proven to be a critical factor for model performance, we show that significant gains are being left on the table by keeping topology static at inference-time. Due to challenges such as scale variation, we should not expect static models configured to perform well across a training dataset to be optimally configured to handle all test data. In this work, we seek to expose the exciting potential of inference-time-dynamic models. By allowing just four layers to dynamically change configuration at inference-time, we show that existing off-the-shelf models like ResNet-50 are capable of over 95% accuracy on ImageNet. This level of performance currently exceeds that of models with over 20x more parameters and significantly more complex training procedures.