arXiv reaDer
Is Heuristic Sampling Necessary in Training Deep Object Detectors?
極端な前景と背景の不均衡の下で正確な深部物体検出器をトレーニングするには、ヒューリスティックサンプリング方法が常に必要です。これは、すべてのトレーニングサンプルのサブセットを再サンプリングするか(バイアスサンプリング、OHEMなどのハードサンプリング方法)、またはすべてのトレーニングサンプルを使用します。それらを区別して再重み付けします(ソフトサンプリング方法、たとえばFocal Loss、GHM)。この論文では、正確な深部物体検出器を訓練するためのそのようなハード/ソフトサンプリング方法の必要性に挑戦します。以前の研究では、ヒューリスティックサンプリング方法を使用せずに検出器をトレーニングすると精度が大幅に低下することが示されていますが、この低下は、再サンプリング/再重み付けの欠如ではなく、不均衡によって引き起こされる不合理な分類勾配の大きさに起因することが明らかになりました。私たちの発見に動機付けられて、初期化と損失スケーリングによって合理的な分類勾配の大きさを達成するために、シンプルでありながら効果的なサンプリングフリーメカニズムを提案します。複数のハイパーパラメータを使用するヒューリスティックサンプリング方法とは異なり、Sampling-Freeメカニズムは、面倒なハイパーパラメータ検索なしで完全にデータ診断を行います。アンカーベースおよびアンカーフリーのオブジェクト検出器のトレーニングにおけるこの方法の有効性を検証します。この方法では、COCOおよびPASCALVOCデータセットのヒューリスティックサンプリング方法よりも常に高い検出精度が得られます。当社のサンプリングフリーメカニズムは、前景と背景の不均衡に対処するための新しい視点を提供します。私たちのコードはでリリースされています。
To train accurate deep object detectors under the extreme foreground-background imbalance, heuristic sampling methods are always necessary, which either re-sample a subset of all training samples (hard sampling methods, e.g. biased sampling, OHEM), or use all training samples but re-weight them discriminatively (soft sampling methods, e.g. Focal Loss, GHM). In this paper, we challenge the necessity of such hard/soft sampling methods for training accurate deep object detectors. While previous studies have shown that training detectors without heuristic sampling methods would significantly degrade accuracy, we reveal that this degradation comes from an unreasonable classification gradient magnitude caused by the imbalance, rather than a lack of re-sampling/re-weighting. Motivated by our discovery, we propose a simple yet effective Sampling-Free mechanism to achieve a reasonable classification gradient magnitude by initialization and loss scaling. Unlike heuristic sampling methods with multiple hyperparameters, our Sampling-Free mechanism is fully data diagnostic, without laborious hyperparameters searching. We verify the effectiveness of our method in training anchor-based and anchor-free object detectors, where our method always achieves higher detection accuracy than heuristic sampling methods on COCO and PASCAL VOC datasets. Our Sampling-Free mechanism provides a new perspective to address the foreground-background imbalance. Our code is released at
updated: Wed Aug 11 2021 10:18:32 GMT+0000 (UTC)
published: Wed Sep 11 2019 06:29:58 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト