公的に利用可能な主題図とクラウドソーシングされたデータにより、ディープ ニューラル ネットワーク (DNN) のトレーニング用にリモート センシング (RS) 画像のアノテーションをゼロコストで収集できます。ただし、このようなアノテーション ソースでは、トレーニング データにノイズの多いラベルが含まれるリスクが増大し、不正確な RS 画像表現学習 (IRL) が発生する可能性があります。この問題に対処するために、本論文では、RS で考慮されている学習タスクとは独立して、IRL 上のノイズの多いラベルの干渉を防ぐことを目的としたラベル ノイズに強い IRL 手法を提案します。この目的を達成するために、提案された方法では、教師あり変分オートエンコーダー (SVAE) と任意の種類の DNN を組み合わせます。これは、画像の特徴に基づいて変分生成プロセスを定義することによって実現されます。これにより、SVAE と対象となる DNN のタスクヘッドから取得した損失値に基づいて、IRL の各トレーニング サンプルの重要性を定義できます。次に、提案された方法は、ノイズのあるラベルを持つ画像の重要性を低くし、IRL 中に正しいラベルを持つ画像の重要性を高くします。実験結果は、RS 画像に適用されたよく知られているラベル ノイズに強い IRL 法と比較したとき、提案された方法の有効性を示しています。提案手法のコードは https://git.tu-berlin.de/rsim/RS-IRL-SVAE で公開されています。
Due to the publicly available thematic maps and crowd-sourced data, remote sensing (RS) image annotations can be gathered at zero cost for training deep neural networks (DNNs). However, such annotation sources may increase the risk of including noisy labels in training data, leading to inaccurate RS image representation learning (IRL). To address this issue, in this paper we propose a label noise robust IRL method that aims to prevent the interference of noisy labels on IRL, independently from the learning task being considered in RS. To this end, the proposed method combines a supervised variational autoencoder (SVAE) with any kind of DNN. This is achieved by defining variational generative process based on image features. This allows us to define the importance of each training sample for IRL based on the loss values acquired from the SVAE and the task head of the considered DNN. Then, the proposed method imposes lower importance to images with noisy labels, while giving higher importance to those with correct labels during IRL. Experimental results show the effectiveness of the proposed method when compared to well-known label noise robust IRL methods applied to RS images. The code of the proposed method is publicly available at https://git.tu-berlin.de/rsim/RS-IRL-SVAE.