arXiv reaDer
クロスドメインリモートセンシング画像セグメンテーションのためのカリキュラムスタイルのローカルからグローバルへの適応
Curriculum-style Local-to-global Adaptation for Cross-domain Remote Sensing Image Segmentation
ドメイン適応は、自然画像ベースのセグメンテーションタスクで広く研究されてきましたが、超高解像度(VHR)リモートセンシング画像(RSI)のクロスドメインセグメンテーションに関する研究はまだ未踏のままです。 VHR RSIベースのクロスドメインセグメンテーションは、主に2つの重要な課題に直面しています。 2)異なるVHRセンサータイプまたは動的に変化するモードにより、VHR画像は、同じ地理的位置に対しても集中的なデータ分散の違いを経験し、異なるグローバル機能レベルドメインギャップをもたらします。これらの課題に対処するために、VHRRSIのセグメンテーションのためのカリキュラムスタイルのローカルからグローバルへのクロスドメイン適応フレームワークを提案します。提案されたカリキュラムスタイルの適応は、ターゲットドメインの各パッチのエントロピーベースのスコアを使用して取得できる適応の難しさに応じて、簡単に難しい方法で適応プロセスを実行します。ドメインイメージ。提案されたローカルからグローバルへの適応は、ローカルセマンティックからグローバル構造の機能の不一致への機能調整プロセスを実行し、上記のクロスドメイン機能の不一致を減らすことができるセマンティックレベルのドメイン分類子とエントロピーレベルのドメイン分類子で構成されます。地理的位置の変化やイメージングモードの変化など、さまざまなクロスドメインシナリオで広範な実験が行われ、実験結果は、提案された方法がVHRRSIのセグメンテーションネットワークのドメイン適応性を大幅に高めることができることを示しています。私たちのコードはhttps://github.com/BOBrown/CCDA_LGFAで入手できます。
Although domain adaptation has been extensively studied in natural image-based segmentation task, the research on cross-domain segmentation for very high resolution (VHR) remote sensing images (RSIs) still remains underexplored. The VHR RSIs-based cross-domain segmentation mainly faces two critical challenges: 1) Large area land covers with many diverse object categories bring severe local patch-level data distribution deviations, thus yielding different adaptation difficulties for different local patches; 2) Different VHR sensor types or dynamically changing modes cause the VHR images to go through intensive data distribution differences even for the same geographical location, resulting in different global feature-level domain gap. To address these challenges, we propose a curriculum-style local-to-global cross-domain adaptation framework for the segmentation of VHR RSIs. The proposed curriculum-style adaptation performs the adaptation process in an easy-to-hard way according to the adaptation difficulties that can be obtained using an entropy-based score for each patch of the target domain, and thus well aligns the local patches in a domain image. The proposed local-to-global adaptation performs the feature alignment process from the locally semantic to globally structural feature discrepancies, and consists of a semantic-level domain classifier and an entropy-level domain classifier that can reduce the above cross-domain feature discrepancies. Extensive experiments have been conducted in various cross-domain scenarios, including geographic location variations and imaging mode variations, and the experimental results demonstrate that the proposed method can significantly boost the domain adaptability of segmentation networks for VHR RSIs. Our code is available at: https://github.com/BOBrown/CCDA_LGFA.
updated: Thu Mar 03 2022 06:33:46 GMT+0000 (UTC)
published: Thu Mar 03 2022 06:33:46 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト