arXiv reaDer
FCCDN:VHR画像変化検出のための機能制約ネットワーク
FCCDN: Feature Constraint Network for VHR Image Change Detection
変化検出は、両耳側性半共登録画像のピクセルごとの違いを識別するプロセスです。それは地球観測にとって非常に重要です。最近、深層学習(DL)の出現により、変化検出の分野で深層畳み込みニューラルネットワーク(CNN)ベースの方法の能力と実現可能性が示されました。ただし、変更機能の学習に対する効果的な監視はまだ不足しています。この作業では、機能制約変更検出ネットワーク(FCCDN)を提案します。両耳側性特徴抽出と特徴融合の両方で特徴を制約します。より具体的には、変化検出タスク用のデュアルエンコーダ-デコーダネットワークバックボーンを提案します。バックボーンの中心で、マルチスケール特徴を抽出して融合するための非ローカル特徴ピラミッドネットワークを設計します。両耳側性特徴を堅牢な方法で融合するために、密な接続ベースの特徴融合モジュールを構築します。さらに、特徴学習を制約するために、自己教師あり学習ベースの戦略が提案されています。 FCCDNに基づいて、2つの建物変更検出データセット(LEVIR-CDとWHU)で最先端のパフォーマンスを実現します。 LEVIR-CDデータセットでは、0.8569のIoUと0.9229のF1スコアを達成しています。 WHUデータセットでは、0.8820のIoUと0.9373のF1スコアを達成しています。さらに、初めて、正確な両耳側性セグメンテーション結果の取得が、セマンティックセグメンテーションラベルを使用せずに達成されます。これは、ラベル付けのコストを節約するため、変更検出のアプリケーションにとって不可欠です。
Change detection is the process of identifying pixelwise differences in bitemporal co-registered images. It is of great significance to Earth observations. Recently, with the emergence of deep learning (DL), the power and feasibility of deep convolutional neural network (CNN)-based methods have been shown in the field of change detection. However, there is still a lack of effective supervision for change feature learning. In this work, a feature constraint change detection network (FCCDN) is proposed. We constrain features both in bitemporal feature extraction and feature fusion. More specifically, we propose a dual encoder-decoder network backbone for the change detection task. At the center of the backbone, we design a nonlocal feature pyramid network to extract and fuse multiscale features. To fuse bitemporal features in a robust way, we build a dense connection-based feature fusion module. Moreover, a self-supervised learning-based strategy is proposed to constrain feature learning. Based on FCCDN, we achieve state-of-the-art performance on two building change detection datasets (LEVIR-CD and WHU). On the LEVIR-CD dataset, we achieve an IoU of 0.8569 and an F1 score of 0.9229. On the WHU dataset, we achieve an IoU of 0.8820 and an F1 score of 0.9373. Moreover, for the first time, the acquisition of accurate bitemporal semantic segmentation results is achieved without using semantic segmentation labels. This is vital for the application of change detection because it saves the cost of labeling.
updated: Thu Sep 02 2021 10:19:34 GMT+0000 (UTC)
published: Sun May 23 2021 06:13:47 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト