ラベルノイズの下で学習するためのイェンセンシャノン発散に基づく2つの新しい損失関数を提案します。ゴーシュらの仕事に続いて。 (2017)、我々はそれらの理論的頑健性について議論します。さらに、クロスエントロピー、平均絶対誤差、一般化されたクロスエントロピー、対称クロスエントロピー、ラベルの平滑化、最も重要な整合性の正則化など、さまざまな損失関数への有益な接続を描画することにより、他のいくつかの望ましいプロパティを明らかにします。合成(CIFAR)ノイズと実際の(WebVision)ノイズの両方を使用して、広範囲にわたる体系的な実験を実施し、他の損失関数よりも大幅で一貫した改善を示しています。また、さまざまな理論的特性を強調するいくつかの有益なサイド実験を実施します。
We propose two novel loss functions based on Jensen-Shannon divergence for learning under label noise. Following the work of Ghosh et al. (2017), we argue about their theoretical robustness. Furthermore, we reveal several other desirable properties by drawing informative connections to various loss functions, e.g., cross entropy, mean absolute error, generalized cross entropy, symmetric cross entropy, label smoothing, and most importantly consistency regularization. We conduct extensive and systematic experiments using both synthetic (CIFAR) and real (WebVision) noise and demonstrate significant and consistent improvements over other loss functions. Also, we conduct several informative side experiments that highlight the different theoretical properties.