動的スケールトレーニングパラダイム(DSTと略記)を提案して、オブジェクト検出におけるスケール変動の課題を軽減します。画像ピラミッド、マルチスケールトレーニング、およびそれらのバリアントなどの以前の戦略は、モデル最適化のためにスケール不変データを準備することを目的としています。ただし、準備手順では、スケールの変動を処理する能力を制限する次の最適化プロセスを認識していません。代わりに、私たちのパラダイムでは、最適化プロセスからのフィードバック情報を使用して、データの準備を動的にガイドします。提案された方法は驚くほど単純ですが、以前の方法を上回り、大幅な向上(MS COCOデータセットで2%以上の平均精度)が得られます。実験結果は、スケール変動処理に対する提案されたDSTメソッドの有効性を示しています。また、さまざまなバックボーン、ベンチマーク、およびインスタンスのセグメンテーションなどの他の困難なダウンストリームタスクに一般化することもできます。推論のオーバーヘッドは発生せず、一般的な検出構成の無料ランチとして機能する可能性があります。さらに、収束が速いため、効率的なトレーニングも容易になります。コードとモデルはgithub.com/yukang2017/Stitcherで入手できます。
We propose a Dynamic Scale Training paradigm (abbreviated as DST) to mitigate scale variation challenge in object detection. Previous strategies like image pyramid, multi-scale training, and their variants are aiming at preparing scale-invariant data for model optimization. However, the preparation procedure is unaware of the following optimization process that restricts their capability in handling the scale variation. Instead, in our paradigm, we use feedback information from the optimization process to dynamically guide the data preparation. The proposed method is surprisingly simple yet obtains significant gains (2%+ Average Precision on MS COCO dataset), outperforming previous methods. Experimental results demonstrate the efficacy of our proposed DST method towards scale variation handling. It could also generalize to various backbones, benchmarks, and other challenging downstream tasks like instance segmentation. It does not introduce inference overhead and could serve as a free lunch for general detection configurations. Besides, it also facilitates efficient training due to fast convergence. Code and models are available at github.com/yukang2017/Stitcher.