コンピュータビジョンコミュニティでは、自然シーン画像(NSI-SOD)からの顕著なオブジェクト検出で大きな進歩が達成されました。対照的に、光学リモートセンシング画像(RSI-SOD)での顕著な物体検出は、依然として挑戦的な新たなトピックです。スケール、照明、イメージングの向きなど、光学RSIの独自の特性により、NSI-SODとRSI-SODの間に大きな違いが生まれます。この論文では、RSI-SODの複数のコンテンツの相補性を調査するために、新しいマルチコンテンツ補完ネットワーク(MCCNet)を提案します。具体的には、MCCNetは一般的なエンコーダ-デコーダアーキテクチャに基づいており、エンコーダとデコーダをブリッジするMulti-Content Complementation Module(MCCM)という名前の新しいキーコンポーネントが含まれています。 MCCMでは、前景機能、エッジ機能、背景機能、グローバル画像レベル機能など、RSI-SODに不可欠な複数のタイプの機能を検討し、それらの間のコンテンツの相補性を活用して、RSIのさまざまなスケールで顕著な領域を強調します。アテンションメカニズムによる機能。さらに、トレーニングフェーズでは、ピクセルレベル、マップレベル、およびメトリック対応の損失を包括的に紹介します。 2つの人気のあるデータセットでの広範な実験は、提案されたMCCNetがNSI-SODとRSI-SODの両方の方法を含む23の最先端の方法よりも優れていることを示しています。このメソッドのコードと結果は、https://github.com/MathLee/MCCNetで入手できます。
In the computer vision community, great progresses have been achieved in salient object detection from natural scene images (NSI-SOD); by contrast, salient object detection in optical remote sensing images (RSI-SOD) remains to be a challenging emerging topic. The unique characteristics of optical RSIs, such as scales, illuminations and imaging orientations, bring significant differences between NSI-SOD and RSI-SOD. In this paper, we propose a novel Multi-Content Complementation Network (MCCNet) to explore the complementarity of multiple content for RSI-SOD. Specifically, MCCNet is based on the general encoder-decoder architecture, and contains a novel key component named Multi-Content Complementation Module (MCCM), which bridges the encoder and the decoder. In MCCM, we consider multiple types of features that are critical to RSI-SOD, including foreground features, edge features, background features, and global image-level features, and exploit the content complementarity between them to highlight salient regions over various scales in RSI features through the attention mechanism. Besides, we comprehensively introduce pixel-level, map-level and metric-aware losses in the training phase. Extensive experiments on two popular datasets demonstrate that the proposed MCCNet outperforms 23 state-of-the-art methods, including both NSI-SOD and RSI-SOD methods. The code and results of our method are available at https://github.com/MathLee/MCCNet.