arXiv reaDer
光学リモートセンシング画像における顕著な物体検出のためのマルチコンテンツ補完ネットワーク
Multi-Content Complementation Network for Salient Object Detection in Optical Remote Sensing Images
コンピュータビジョンコミュニティでは、自然シーン画像(NSI-SOD)からの顕著なオブジェクト検出で大きな進歩が達成されました。対照的に、光学リモートセンシング画像(RSI-SOD)での顕著な物体検出は、依然として挑戦的な新たなトピックです。スケール、照明、イメージングの向きなど、光学RSIの独自の特性により、NSI-SODとRSI-SODの間に大きな違いが生まれます。この論文では、RSI-SODの複数のコンテンツの相補性を調査するために、新しいマルチコンテンツ補完ネットワーク(MCCNet)を提案します。具体的には、MCCNetは一般的なエンコーダ-デコーダアーキテクチャに基づいており、エンコーダとデコーダをブリッジするMulti-Content Complementation Module(MCCM)という名前の新しいキーコンポーネントが含まれています。 MCCMでは、前景機能、エッジ機能、背景機能、グローバル画像レベル機能など、RSI-SODに不可欠な複数のタイプの機能を検討し、それらの間のコンテンツの相補性を活用して、RSIのさまざまなスケールで顕著な領域を強調します。アテンションメカニズムによる機能。さらに、トレーニングフェーズでは、ピクセルレベル、マップレベル、およびメトリック対応の損失を包括的に紹介します。 2つの人気のあるデータセットでの広範な実験は、提案されたMCCNetがNSI-SODとRSI-SODの両方の方法を含む23の最先端の方法よりも優れていることを示しています。このメソッドのコードと結果は、https://github.com/MathLee/MCCNetで入手できます。
In the computer vision community, great progresses have been achieved in salient object detection from natural scene images (NSI-SOD); by contrast, salient object detection in optical remote sensing images (RSI-SOD) remains to be a challenging emerging topic. The unique characteristics of optical RSIs, such as scales, illuminations and imaging orientations, bring significant differences between NSI-SOD and RSI-SOD. In this paper, we propose a novel Multi-Content Complementation Network (MCCNet) to explore the complementarity of multiple content for RSI-SOD. Specifically, MCCNet is based on the general encoder-decoder architecture, and contains a novel key component named Multi-Content Complementation Module (MCCM), which bridges the encoder and the decoder. In MCCM, we consider multiple types of features that are critical to RSI-SOD, including foreground features, edge features, background features, and global image-level features, and exploit the content complementarity between them to highlight salient regions over various scales in RSI features through the attention mechanism. Besides, we comprehensively introduce pixel-level, map-level and metric-aware losses in the training phase. Extensive experiments on two popular datasets demonstrate that the proposed MCCNet outperforms 23 state-of-the-art methods, including both NSI-SOD and RSI-SOD methods. The code and results of our method are available at https://github.com/MathLee/MCCNet.
updated: Thu Dec 02 2021 04:46:40 GMT+0000 (UTC)
published: Thu Dec 02 2021 04:46:40 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト