arXiv reaDer
ColorMapGAN: Unsupervised Domain Adaptation for Semantic Segmentation Using Color Mapping Generative Adversarial Networks
  大気の影響や捕捉の違いなどのさまざまな理由により、異なる地理的位置から収集された衛星画像のスペクトル帯域間に大きな違いが存在する場合がよくあります。トレーニングとテストデータのスペクトル分布の間の大きなシフトにより、現在の最先端の教師あり学習アプローチが不十分なマップを出力します。このような変化に強い新しいセマンティックセグメンテーションフレームワークを提示します。提案されたフレームワークの主要なコンポーネントは、カラーマッピング生成敵対ネットワーク(ColorMapGAN)です。これは、トレーニングイメージと意味的にまったく同じであるが、スペクトル分布がテストイメージの分布に似ている偽のトレーニングイメージを生成できます。次に、偽の画像とトレーニング画像のグラウンドトゥルースを使用して、既にトレーニングされた分類器を微調整します。既存のGenerative Adversarial Networks(GAN)とは異なり、ColorMapGANのジェネレータには畳み込み層またはプーリング層がありません。要素ごとの行列乗算と行列加算操作を1回だけ実行することで、トレーニングデータの色をテストデータの色に変換することを学習します。 ColorMapGANのアーキテクチャはシンプルだが強力な設計のおかげで、提案されたフレームワークは、精度と計算の複雑さの両方の点で既存のアプローチよりも大きなマージンで優れています。
Due to the various reasons such as atmospheric effects and differences in acquisition, it is often the case that there exists a large difference between spectral bands of satellite images collected from different geographic locations. The large shift between spectral distributions of training and test data causes the current state of the art supervised learning approaches to output unsatisfactory maps. We present a novel semantic segmentation framework that is robust to such shift. The key component of the proposed framework is Color Mapping Generative Adversarial Networks (ColorMapGAN), which can generate fake training images that are semantically exactly the same as training images, but whose spectral distribution is similar to the distribution of the test images. We then use the fake images and the ground-truth for the training images to fine-tune the already trained classifier. Contrary to the existing Generative Adversarial Networks (GANs), the generator in ColorMapGAN does not have any convolutional or pooling layers. It learns to transform the colors of the training data to the colors of the test data by performing only one element-wise matrix multiplication and one matrix addition operations. Thanks to the architecturally simple but powerful design of ColorMapGAN, the proposed framework outperforms the existing approaches with a large margin in terms of both accuracy and computational complexity.
updated: Sun Sep 29 2019 19:56:56 GMT+0000 (UTC)
published: Tue Jul 30 2019 12:30:32 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト