リモートセンシング画像からの道路セグメンテーションは、幅広いアプリケーションの可能性を秘めた挑戦的なタスクです。ディープニューラルネットワークは、大規模なラベル付きデータの能力を活用することでこの分野を進歩させましたが、取得には非常に費用と時間がかかります。 1つの解決策は、安価な利用可能なデータを使用してモデルをトレーニングし、それをデプロイして特定のアプリケーションドメインからのデータを直接処理することです。それにもかかわらず、よく知られているドメインシフト(DS)の問題により、トレーニングされたモデルがターゲットドメインで適切に一般化されません。この論文では、この分野のDSの問題に対処するために、RoadDAと呼ばれる新しい段階的なドメイン適応モデルを提案します。最初の段階では、RoadDAは、生成的敵対的ネットワーク(GAN)ベースのドメイン間適応を介して、ターゲットドメイン機能をソース機能と整合するように適応させます。具体的には、長くて細い道路の情報損失を回避し、識別可能で堅牢な機能を学習するために、機能ピラミッド融合モジュールが考案されています。また、ターゲットドメインのドメイン内の不一致に対処するために、第2段階では、敵対的な自己トレーニング方法を提案します。トレーニング済みのジェネレーターを使用してターゲットドメインの疑似ラベルを生成し、道路の信頼スコアに基づいて、ラベル付きのイージースプリットとラベルなしのハードスプリットに分割します。ハードスプリットの機能は、敵対的学習を使用して簡単な機能と整合するように適応され、ドメイン内適応プロセスが繰り返されて、セグメンテーションのパフォーマンスが徐々に向上します。 2つのベンチマークでの実験結果は、RoadDAがドメインギャップを効率的に削減し、最先端の方法よりも優れていることを示しています。
Road segmentation from remote sensing images is a challenging task with wide ranges of application potentials. Deep neural networks have advanced this field by leveraging the power of large-scale labeled data, which, however, are extremely expensive and time-consuming to acquire. One solution is to use cheap available data to train a model and deploy it to directly process the data from a specific application domain. Nevertheless, the well-known domain shift (DS) issue prevents the trained model from generalizing well on the target domain. In this paper, we propose a novel stagewise domain adaptation model called RoadDA to address the DS issue in this field. In the first stage, RoadDA adapts the target domain features to align with the source ones via generative adversarial networks (GAN) based inter-domain adaptation. Specifically, a feature pyramid fusion module is devised to avoid information loss of long and thin roads and learn discriminative and robust features. Besides, to address the intra-domain discrepancy in the target domain, in the second stage, we propose an adversarial self-training method. We generate the pseudo labels of target domain using the trained generator and divide it to labeled easy split and unlabeled hard split based on the road confidence scores. The features of hard split are adapted to align with the easy ones using adversarial learning and the intra-domain adaptation process is repeated to progressively improve the segmentation performance. Experiment results on two benchmarks demonstrate that RoadDA can efficiently reduce the domain gap and outperforms state-of-the-art methods.