顕著なオブジェクトの検出(SOD)に関する最近の進歩は、主にマルチスケール学習の恩恵を受けています。マルチスケールの学習では、高レベルの機能と低レベルの機能が連携して、それぞれ顕著なオブジェクトの検索と詳細の検出を行います。ただし、ほとんどの努力は、マルチスケールの特徴を融合したり、境界表現を強化したりすることにより、低レベルの特徴学習に費やされています。高レベルの機能は、他の多くのタスクに効果的であることが長い間証明されていますが、SODについてはほとんど研究されていません。このホワイトペーパーでは、このギャップを利用して、高レベルの機能を強化することがSODにも不可欠であることを示します。この目的のために、Extremely-Downsampled Network(EDN)を導入します。これは、極端なダウンサンプリング手法を使用して、画像全体のグローバルビューを効果的に学習し、正確な顕著なオブジェクトのローカリゼーションを実現します。より優れたマルチレベル機能融合を実現するために、スケール相関ピラミッド畳み込み(SCPC)を構築して、上記の極端なダウンサンプリングからオブジェクトの詳細を復元するためのエレガントなデコーダーを構築します。広範な実験により、EDNがリアルタイムの速度で最先端のパフォーマンスを実現することが実証されています。当社の効率的なEDN-Liteは、316fpsの速度で競争力のあるパフォーマンスも実現します。したがって、この作業はSODの新しい考え方を刺激することが期待されます。コードはhttps://github.com/yuhuan-wu/EDNで入手できます。
Recent progress on salient object detection (SOD) mainly benefits from multi-scale learning, where the high-level and low-level features collaborate in locating salient objects and discovering fine details, respectively. However, most efforts are devoted to low-level feature learning by fusing multi-scale features or enhancing boundary representations. High-level features, which although have long proven effective for many other tasks, yet have been barely studied for SOD. In this paper, we tap into this gap and show that enhancing high- level features is essential for SOD as well. To this end, we introduce an Extremely-Downsampled Network (EDN), which employs an extreme downsampling technique to effectively learn a global view of the whole image, leading to accurate salient object localization. To accomplish better multi-level feature fusion, we construct the Scale-Correlated Pyramid Convolution (SCPC) to build an elegant decoder for recovering object details from the above extreme downsampling. Extensive experiments demonstrate that EDN achieves state-of-the-art performance with real-time speed. Our efficient EDN-Lite also achieves competitive performance with a speed of 316fps. Hence, this work is expected to spark some new thinking in SOD. Code is available at https://github.com/yuhuan-wu/EDN.