雲のセグメンテーションは、気候モデリングの画像分析において重要な役割を果たします。クラウドセグメンテーションのためにトレーニングデータに手動でラベルを付けることは、時間がかかり、エラーが発生しやすくなります。ピクセルレベルのラベルを自然に取得するため、合成データを使用してセグメンテーションネットワークをトレーニングすることを検討します。それにもかかわらず、合成画像と実際の画像の間のドメインギャップは、トレーニングされたモデルのパフォーマンスを大幅に低下させます。色空間の実際の画像に合成データを適応させるために色に敏感なジェネレータと弁別器を訓練することにより、ギャップを埋めるための色空間適応方法を提案します。一般的な畳み込みカーネルによって画像を変換する代わりに、一連の閉じた形式の操作を採用して、ラベルを保持しながら色空間を調整します。また、合成から実数への巻雲データセットSynCloudを構築し、巻雲のセマンティックセグメンテーションタスクに対する適応効果を示します。セマンティックセグメンテーションをトレーニングするために適応された合成データを使用すると、実際の画像に適用した場合に6:59%の改善が達成され、代替方法よりも優れています。
Cloud segmentation plays a crucial role in image analysis for climate modeling. Manually labeling the training data for cloud segmentation is time-consuming and error-prone. We explore to train segmentation networks with synthetic data due to the natural acquisition of pixel-level labels. Nevertheless, the domain gap between synthetic and real images significantly degrades the performance of the trained model. We propose a color space adaptation method to bridge the gap, by training a color-sensitive generator and discriminator to adapt synthetic data to real images in color space. Instead of transforming images by general convolutional kernels, we adopt a set of closed-form operations to make color-space adjustments while preserving the labels. We also construct a synthetic-to-real cirrus cloud dataset SynCloud and demonstrate the adaptation efficacy on the semantic segmentation task of cirrus clouds. With our adapted synthetic data for training the semantic segmentation, we achieve an improvement of 6:59% when applied to real images, superior to alternative methods.