ラベル ノイズとクラスの不均衡は、通常、実世界のデータに共存します。ただし、堅牢な学習のための以前の作業は、通常、データ バイアスのいずれか 1 つのタイプに対処し、両方に直面するとパフォーマンスが低下します。このギャップを軽減するために、この作業では、トレーニング プロセスを使用して目的関数を自動的に調整し、ロングテールのノイズの多いデータから分類器を確実に学習する、新しいメタ学習ベースの動的損失を提示します。具体的には、動的損失は、ラベル修正器とマージン生成器で構成されます。これらはそれぞれ、ノイズの多いラベルを修正し、基になるデータ分布と分類器の学習状態を認識することにより、クラスごとの追加の分類マージンを生成します。少量の偏りのないメタデータを多様でハードなサンプルで強化する新しい階層サンプリング戦略を装備し、動的損失の 2 つのコンポーネントは、メタ学習を通じて共同で最適化され、クリーンでバランスの取れたテスト データにうまく適応するように分類器を育成します。広範な実験により、CIFAR-10/100、Animal-10N、ImageNet-LT、Webvision など、さまざまなタイプのデータ バイアスを含む複数の現実世界および合成データセットに対して、私たちの方法が最先端の精度を達成することが示されています。コードはまもなく公開されます。
Label noise and class imbalance commonly coexist in real-world data. Previous works for robust learning, however, usually address either one type of the data biases and underperform when facing them both. To mitigate this gap, this work presents a novel meta-learning based dynamic loss that automatically adjusts the objective functions with the training process to robustly learn a classifier from long-tailed noisy data. Concretely, our dynamic loss comprises a label corrector and a margin generator, which respectively correct noisy labels and generate additive per-class classification margins by perceiving the underlying data distribution as well as the learning state of the classifier. Equipped with a new hierarchical sampling strategy that enriches a small amount of unbiased metadata with diverse and hard samples, the two components in the dynamic loss are optimized jointly through meta-learning and cultivate the classifier to well adapt to clean and balanced test data. Extensive experiments show our method achieves state-of-the-art accuracy on multiple real-world and synthetic datasets with various types of data biases, including CIFAR-10/100, Animal-10N, ImageNet-LT, and Webvision. Code will soon be publicly available.