分類のためのニューラルネットワークの堅牢性に焦点を当てます。堅牢性を実現するための方法間の公正な比較を可能にするために、最初に分類器の劣化の測定に基づく標準を導入します。次に、ネットワークを強化するための自然摂動トレーニングを提案します。自然な摂動が実際に発生します。同じオブジェクトの2つの画像の違いは、弾性変形(視野角がわずかに異なる場合)、オクルージョン(オブジェクトの背後に隠れている場合)、または飽和ガウス分布によって近似できます。ノイズなど。そのようなバリエーションのランダムバージョンでエポックの一部をトレーニングすると、分類器がよりよく学習するのに役立ちます。サイズと粒度が異なる6つのデータセットで広範な実験を行います。自然摂動学習は、クリーンな敵対的および自然摂動画像での敵対的トレーニングよりも優れた、はるかに高速なパフォーマンスを示します。トレーニング中に見られない摂動に対する一般的なロバスト性も向上します。 Cifar-10およびSTL-10の場合、自然摂動トレーニングはクリーンなデータの精度をさらに向上させ、最先端のパフォーマンスに到達します。アブレーション研究は、自然な摂動トレーニングの有効性を検証します。
We focus on the robustness of neural networks for classification. To permit a fair comparison between methods to achieve robustness, we first introduce a standard based on the mensuration of a classifier's degradation. Then, we propose natural perturbed training to robustify the network. Natural perturbations will be encountered in practice: the difference of two images of the same object may be approximated by an elastic deformation (when they have slightly different viewing angles), by occlusions (when they hide differently behind objects), or by saturation, Gaussian noise etc. Training some fraction of the epochs on random versions of such variations will help the classifier to learn better. We conduct extensive experiments on six datasets of varying sizes and granularity. Natural perturbed learning show better and much faster performance than adversarial training on clean, adversarial as well as natural perturbed images. It even improves general robustness on perturbations not seen during the training. For Cifar-10 and STL-10 natural perturbed training even improves the accuracy for clean data and reaches the state of the art performance. Ablation studies verify the effectiveness of natural perturbed training.