arXiv reaDer
ノイズの多いラベルの存在下で畳み込みニューラル ネットワークをトレーニングするためのデータ拡張の影響に関する研究
A Study on the Impact of Data Augmentation for Training Convolutional Neural Networks in the Presence of Noisy Labels
ラベル ノイズは大規模な実世界のデータセットでは一般的であり、その存在はディープ ニューラル ネットワークのトレーニング プロセスに悪影響を及ぼします。この問題に対処するためのトレーニング戦略に焦点を当てた研究がいくつかありますが、ディープ ニューラル ネットワークをトレーニングするための設計上の選択肢としてのデータ拡張の影響を評価した研究はほとんどありません。この作業では、さまざまなデータ拡張を使用した場合のモデルの堅牢性と、ノイズの多いラベルが存在するトレーニングの改善を分析します。データセットMNist、CIFAR-10、CIFAR-100、および実世界のデータセットClothing1Mについて、さまざまなレベルの合成ノイズを使用して、最先端および従来のデータ拡張戦略を評価します。精度メトリックを使用してメソッドを評価します。結果は、データ拡張を適切に選択することで、ラベル ノイズに対するモデルのロバスト性を大幅に改善できることを示しています。拡張なしのベースラインと比較して、相対最高テスト精度が最大 177.84% 増加し、絶対値で最大 6% 増加します。最先端の DivideMix トレーニング戦略。
Label noise is common in large real-world datasets, and its presence harms the training process of deep neural networks. Although several works have focused on the training strategies to address this problem, there are few studies that evaluate the impact of data augmentation as a design choice for training deep neural networks. In this work, we analyse the model robustness when using different data augmentations and their improvement on the training with the presence of noisy labels. We evaluate state-of-the-art and classical data augmentation strategies with different levels of synthetic noise for the datasets MNist, CIFAR-10, CIFAR-100, and the real-world dataset Clothing1M. We evaluate the methods using the accuracy metric. Results show that the appropriate selection of data augmentation can drastically improve the model robustness to label noise, increasing up to 177.84% of relative best test accuracy compared to the baseline with no augmentation, and an increase of up to 6% in absolute value with the state-of-the-art DivideMix training strategy.
updated: Sun Sep 04 2022 19:56:31 GMT+0000 (UTC)
published: Tue Aug 23 2022 20:04:17 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト