arXiv reaDer
変更拡散: 差分特徴ガイド型 DDPM に基づく変更検出マップの生成
Change Diffusion: Change Detection Map Generation Based on Difference-Feature Guided DDPM
CNN 純粋または Transformer ネットワークに基づくディープ ラーニング (DL) アプローチは、バイタイムラル変化検出 (CD) において有望な結果を実証しています。ただし、さまざまなレベルの特徴マップ間の暗黙的なコンテキスト依存関係を完全に捕捉するのに苦労するため、コンテキスト情報の集約が不十分であるため、そのパフォーマンスは制限されます。さらに、研究者は、軽量の CD 分類器をトレーニングするために、事前トレーニングされたノイズ除去拡散確率モデル (DDPM) を利用しました。それにもかかわらず、DDPM をトレーニングして複雑で詳細なマルチチャネル リモート センシング画像を生成するには、数か月のトレーニング時間と大量のラベルなしリモート センシング データセットが必要となり、単一チャネルの変化マップを生成するよりもはるかに複雑になります。これらの課題を克服するために、私たちは、限定されたアノテーション付きデータセットを使用して迅速にトレーニングできる変更認識拡散モデル (CADM) と呼ばれる、新しいエンドツーエンドの DDPM ベースのモデル アーキテクチャを提案します。さらに、動的差分条件付きエンコーディングを導入して、CD データセットのバイタイムラル画像に対する DDPM における段階的な領域の注意を強化します。この方法は、各サンプリング ステップの状態適応条件を確立し、モデルの 2 つの主要な革新的な点、1) エンドツーエンドの性質、2) 差分条件付きエンコーディングを強調します。 CDD、WHU、レヴィエ、GVLM など、さまざまな地上シナリオを使用して 4 つのリモート センシング CD タスクで CADM を評価します。実験結果は、CADM が最先端の方法よりも大幅に優れていることを示し、提案されたモデルの一般化と有効性を示しています。
Deep learning (DL) approaches based on CNN-purely or Transformer networks have demonstrated promising results in bitemporal change detection (CD). However, their performance is limited by insufficient contextual information aggregation, as they struggle to fully capture the implicit contextual dependency relationships among feature maps at different levels. Additionally, researchers have utilized pre-trained denoising diffusion probabilistic models (DDPMs) for training lightweight CD classifiers. Nevertheless, training a DDPM to generate intricately detailed, multi-channel remote sensing images requires months of training time and a substantial volume of unlabeled remote sensing datasets, making it significantly more complex than generating a single-channel change map. To overcome these challenges, we propose a novel end-to-end DDPM-based model architecture called change-aware diffusion model (CADM), which can be trained using a limited annotated dataset quickly. Furthermore, we introduce dynamic difference conditional encoding to enhance step-wise regional attention in DDPM for bitemporal images in CD datasets. This method establishes state-adaptive conditions for each sampling step, emphasizing two main innovative points of our model: 1) its end-to-end nature and 2) difference conditional encoding. We evaluate CADM on four remote sensing CD tasks with different ground scenarios, including CDD, WHU, Levier, and GVLM. Experimental results demonstrate that CADM significantly outperforms state-of-the-art methods, indicating the generalization and effectiveness of the proposed model.
updated: Tue Jun 06 2023 05:51:50 GMT+0000 (UTC)
published: Tue Jun 06 2023 05:51:50 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト