arXiv reaDer
ノイズの多いラベルに対する堅牢な機能学習
Robust Feature Learning Against Noisy Labels
ディープ ニューラル ネットワークの教師あり学習は、高品質のラベルで注釈が付けられた大規模なデータセットに大きく依存します。対照的に、ラベルが間違っているサンプルはモデルの一般化を大幅に低下させ、サンプルを暗記することになり、データ内容と誤ったアノテーションの誤った関連付けをさらに学習する可能性があります。この目的を達成するために、この論文では、教師なし拡張復元とクラスター正則化に基づいてロバストな特徴表現を学習することにより、ノイズの多いラベルに対処する効率的なアプローチを提案します。さらに、騒々しいレーベルからの監視による悪影響を最小限に抑えるために、プログレッシブ セルフ ブートストラップが導入されています。私たちが提案する設計は汎用的であり、最小限のオーバーヘッドで既存の分類アーキテクチャに適用できる柔軟性があります。実験結果は、私たちの提案した方法が、非常にノイズの多いラベルの下でモデルのロバスト性を効率的かつ効果的に強化できることを示しています。
Supervised learning of deep neural networks heavily relies on large-scale datasets annotated by high-quality labels. In contrast, mislabeled samples can significantly degrade the generalization of models and result in memorizing samples, further learning erroneous associations of data contents to incorrect annotations. To this end, this paper proposes an efficient approach to tackle noisy labels by learning robust feature representation based on unsupervised augmentation restoration and cluster regularization. In addition, progressive self-bootstrapping is introduced to minimize the negative impact of supervision from noisy labels. Our proposed design is generic and flexible in applying to existing classification architectures with minimal overheads. Experimental results show that our proposed method can efficiently and effectively enhance model robustness under severely noisy labels.
updated: Mon Jul 10 2023 02:55:35 GMT+0000 (UTC)
published: Mon Jul 10 2023 02:55:35 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト