2つの多時期航空画像が与えられた場合、意味変化検出は、土地被覆の変化を特定し、ピクセル単位の境界でそれらの変化タイプを識別することを目的としています。この問題は、正確な都市計画や天然資源管理など、地球のビジョンに関連する多くのタスクで不可欠です。既存の最先端のアルゴリズムは、主に、各入力画像に同種の操作を適用し、抽出された特徴を比較することによって、変更されたピクセルを識別します。ただし、変更された地域では、まったく異なる土地被覆分布では、入力ごとに異種の特徴抽出手順が必要になることがよくあります。この論文では、非対称シャムネットワーク(ASN)を提示して、さまざまなサイズの領域を含み、さまざまな土地間の不一致を考慮に入れるためにさまざまな量のパラメーターを適用する、大きく異なる構造のモジュールから取得した機能ペアを通じて意味変化を見つけて識別します。 -配布をカバーします。モデルをより適切にトレーニングおよび評価するために、大規模な注釈付きの意味変化検出データセット(SECOND)を作成し、適応しきい値学習(ATL)モジュールと分離カッパ(SeK)係数を提案してラベルの影響を軽減します。モデルのトレーニングと評価の不均衡。実験結果は、提案されたモデルが、異なるエンコーダバックボーンを備えた最先端のアルゴリズムを安定して上回ることができることを示しています。
Given two multi-temporal aerial images, semantic change detection aims to locate the land-cover variations and identify their change types with pixel-wise boundaries. This problem is vital in many earth vision related tasks, such as precise urban planning and natural resource management. Existing state-of-the-art algorithms mainly identify the changed pixels by applying homogeneous operations on each input image and comparing the extracted features. However, in changed regions, totally different land-cover distributions often require heterogeneous features extraction procedures w.r.t each input. In this paper, we present an asymmetric siamese network (ASN) to locate and identify semantic changes through feature pairs obtained from modules of widely different structures, which involve areas of various sizes and apply different quantities of parameters to factor in the discrepancy across different land-cover distributions. To better train and evaluate our model, we create a large-scale well-annotated SEmantic Change detectiON Dataset (SECOND), while an Adaptive Threshold Learning (ATL) module and a Separated Kappa (SeK) coefficient are proposed to alleviate the influences of label imbalance in model training and evaluation. The experimental results demonstrate that the proposed model can stably outperform the state-of-the-art algorithms with different encoder backbones.