ノイズの多いラベルを処理するには、誤ってラベル付けされたサンプルを区別することが重要です。 CoteachingやJoCoRなどの以前の方法では、2つの異なるネットワークを導入して、ノイズの多いサンプルからクリーンなサンプルを選択し、これらのクリーンなサンプルのみを使用してディープモデルをトレーニングします。 2つのネットワークを同時にトレーニングする必要があるこれらの方法とは異なり、1つのネットワークのみを使用してクリーンなサンプルを識別する簡単で効果的な方法を提案します。クリーンなサンプルは元の画像と変換された画像の一貫した予測に到達することを好みますが、ノイズの多いサンプルは通常一貫性のない予測に悩まされます。この観察に動機付けられて、ネットワークトレーニングのために元の画像と変換された画像の間の変換の一貫性を制約することを紹介し、次にネットワークのパラメータを更新するために小さな損失のサンプルを選択します。さらに、ノイズの多いラベルの悪影響を軽減するために、オフラインのハードラベルとオンラインのソフトラベルを使用して分類損失を設計し、堅牢なモデルをトレーニングするためのより信頼性の高い監視を提供します。 CIFAR-10、CIFAR-100、Clothing1Mデータセットで包括的な実験を行います。ベースラインと比較して、最先端のパフォーマンスを実現しています。特に、ほとんどの場合、提案された方法はベースラインを大幅に上回っています。
It is crucial to distinguish mislabeled samples for dealing with noisy labels. Previous methods such as Coteaching and JoCoR introduce two different networks to select clean samples out of the noisy ones and only use these clean ones to train the deep models. Different from these methods which require to train two networks simultaneously, we propose a simple and effective method to identify clean samples only using one single network. We discover that the clean samples prefer to reach consistent predictions for the original images and the transformed images while noisy samples usually suffer from inconsistent predictions. Motivated by this observation, we introduce to constrain the transform consistency between the original images and the transformed images for network training, and then select small-loss samples to update the parameters of the network. Furthermore, in order to mitigate the negative influence of noisy labels, we design a classification loss by using the off-line hard labels and on-line soft labels to provide more reliable supervisions for training a robust model. We conduct comprehensive experiments on CIFAR-10, CIFAR-100 and Clothing1M datasets. Compared with the baselines, we achieve the state-of-the-art performance. Especially, in most cases, our proposed method outperforms the baselines by a large margin.