入力画像、特徴、またはネットワークの摂動を使用した一貫性学習は、半教師ありセマンティックセグメンテーションで顕著な結果を示していますが、このアプローチは、ラベルのないトレーニング画像の不正確な予測によって深刻な影響を受ける可能性があります。これらの不正確な予測には2つの結果があります。1)「厳密な」クロスエントロピー(CE)損失に基づくトレーニングは、予測の誤りを簡単に上回り、確証バイアスにつながる可能性があります。 2)これらの不正確な予測に適用される摂動は、潜在的に誤った予測をトレーニング信号として使用し、一貫性の学習を低下させます。この論文では、新しい補助教師を含む平均教師(MT)モデルの新しい拡張と、MTの平均二乗誤差(MSE)のより厳密な信頼性による置き換えにより、一貫性学習方法の予測精度の問題に対処します。加重クロスエントロピー(Conf-CE)損失。このモデルによる正確な予測により、ネットワーク、入力データ、および特徴の摂動の難しい組み合わせを使用して、特徴の摂動が新しい敵対的な摂動で構成される一貫性学習の一般化を改善できます。公開ベンチマークの結果は、私たちのアプローチが、この分野での以前のSOTA手法に比べて目覚ましい改善を達成していることを示しています。
Consistency learning using input image, feature, or network perturbations has shown remarkable results in semi-supervised semantic segmentation, but this approach can be seriously affected by inaccurate predictions of unlabelled training images. There are two consequences of these inaccurate predictions: 1) the training based on the ``strict'' cross-entropy (CE) loss can easily overfit prediction mistakes, leading to confirmation bias; and 2) the perturbations applied to these inaccurate predictions will use potentially erroneous predictions as training signals, degrading consistency learning. In this paper, we address the prediction accuracy problem of consistency learning methods with novel extensions of the mean-teacher (MT) model, which include a new auxiliary teacher, and the replacement of MT's mean square error (MSE) by a stricter confidence-weighted cross-entropy (Conf-CE) loss. The accurate prediction by this model allows us to use a challenging combination of network, input data and feature perturbations to improve the consistency learning generalisation, where the feature perturbations consist of a new adversarial perturbation. Results on public benchmarks show that our approach achieves remarkable improvements over the previous SOTA methods in the field.