データ拡張は、高性能の深部画像分類器をトレーニングするための事実上のコンポーネントになっていますが、オブジェクト検出の可能性は十分に検討されていません。ほとんどの最先端のオブジェクト検出器は、事前にトレーニングされた分類器を微調整することで恩恵を受けることに注意して、最初に、さまざまなデータ拡張からの分類器のゲインがオブジェクト検出にどのように転送されるかを調べます。結果は落胆します。精度または堅牢性のいずれかの観点から微調整すると、ゲインは減少します。この作業は、代わりに、モデルに依存するデータ拡張と見なすことができる敵対的な例を調査することにより、オブジェクト検出器の微調整段階を拡張します。私たちの方法は、検出器の分類およびローカリゼーションブランチから供給されたより強力な敵対的画像を動的に選択し、検出器とともに進化して、拡張ポリシーが最新かつ適切なままであることを保証します。このモデル依存の拡張は、特定の1つの検出器に基づいて検索されるモデルに依存しない拡張ポリシーであるAutoAugmentよりも優れたさまざまなオブジェクト検出器に一般化されます。私たちのアプローチは、COCOオブジェクト検出ベンチマークで最先端のEfficientDetsのパフォーマンスを+ 1.1mAP向上させます。また、自然歪みに対する検出器の堅牢性が+3.8 mAP向上し、ドメインシフトに対する堅牢性が+ 1.3mAP向上します。モデルはhttps://github.com/google/automl/tree/master/efficientdet/Det-AdvProp.mdで入手できます。
Data augmentation has become a de facto component for training high-performance deep image classifiers, but its potential is under-explored for object detection. Noting that most state-of-the-art object detectors benefit from fine-tuning a pre-trained classifier, we first study how the classifiers' gains from various data augmentations transfer to object detection. The results are discouraging; the gains diminish after fine-tuning in terms of either accuracy or robustness. This work instead augments the fine-tuning stage for object detectors by exploring adversarial examples, which can be viewed as a model-dependent data augmentation. Our method dynamically selects the stronger adversarial images sourced from a detector's classification and localization branches and evolves with the detector to ensure the augmentation policy stays current and relevant. This model-dependent augmentation generalizes to different object detectors better than AutoAugment, a model-agnostic augmentation policy searched based on one particular detector. Our approach boosts the performance of state-of-the-art EfficientDets by +1.1 mAP on the COCO object detection benchmark. It also improves the detectors' robustness against natural distortions by +3.8 mAP and against domain shift by +1.3 mAP. Models are available at https://github.com/google/automl/tree/master/efficientdet/Det-AdvProp.md