完全に監視されたパラダイムは、密集した群集シナリオの多数の画像とその注釈を要求するため、費用と労力がかかるため、群集カウントの半教師ありアプローチが注目を集めています。この論文は、群集カウント問題のための正則化された代理タスク(バイナリセグメンテーション)を介した空間的不確実性を意識した半教師ありアプローチを提案します。既存の半教師あり学習ベースの群集カウント方法とは異なり、ラベルなしデータを活用するために、提案された空間的不確実性を意識した教師と生徒のフレームワークは、ラベルなしデータからのノイズの多い監視に最終的に対処しながら、信頼性の高い地域の情報に焦点を当てます-マナーを終了します。具体的には、教師モデルの代理タスクから空間不確実性マップを推定して、メインタスク(密度回帰)の特徴学習と学生モデルの代理タスクを同時にガイドします。さらに、学生モデルのメインタスクとサロゲートタスクの間に固有の空間整合性正則化を適用するためのシンプルで効果的な差分変換レイヤーを導入します。これにより、サロゲートタスクはより信頼性の高い予測を生成し、高品質の不確実性マップを生成できます。したがって、私たちのモデルは、学生モデルのプライマリタスクとサロゲートタスクの間で空間的な不整合が発生するタスクレベルの摂動問題にも対処できます。 4つの挑戦的な群集カウントデータセットの実験結果は、私たちの方法が最先端の半教師あり方法よりも優れたパフォーマンスを達成することを示しています。
Semi-supervised approaches for crowd counting attract attention, as the fully supervised paradigm is expensive and laborious due to its request for a large number of images of dense crowd scenarios and their annotations. This paper proposes a spatial uncertainty-aware semi-supervised approach via regularized surrogate task (binary segmentation) for crowd counting problems. Different from existing semi-supervised learning-based crowd counting methods, to exploit the unlabeled data, our proposed spatial uncertainty-aware teacher-student framework focuses on high confident regions' information while addressing the noisy supervision from the unlabeled data in an end-to-end manner. Specifically, we estimate the spatial uncertainty maps from the teacher model's surrogate task to guide the feature learning of the main task (density regression) and the surrogate task of the student model at the same time. Besides, we introduce a simple yet effective differential transformation layer to enforce the inherent spatial consistency regularization between the main task and the surrogate task in the student model, which helps the surrogate task to yield more reliable predictions and generates high-quality uncertainty maps. Thus, our model can also address the task-level perturbation problems that occur spatial inconsistency between the primary and surrogate tasks in the student model. Experimental results on four challenging crowd counting datasets demonstrate that our method achieves superior performance to the state-of-the-art semi-supervised methods.