arXiv reaDer
整合性学習による顕著なオブジェクトの検出
Salient Object Detection via Integrity Learning
現在の顕著な物体検出(SOD)の作業は大きな進歩を遂げましたが、予測される顕著な領域の整合性に関しては制限があります。完全性の概念は、ミクロレベルとマクロレベルの両方で定義されています。具体的には、ミクロレベルでは、モデルは特定の顕著なオブジェクトに属するすべてのパーツを強調表示する必要があります。一方、マクロレベルでは、モデルは特定の画像内のすべての顕著なオブジェクトを検出する必要があります。 SODの整合性学習を容易にするために、強力な整合性機能を学習するための3つの重要なコンポーネントを調査する新しいIntegrity Cognition Network(ICON)を設計します。 1)機能の識別可能性に重点を置いている既存のモデルとは異なり、さまざまな受容野(つまり、カーネルの形状とコンテキスト)を持つ機能を集約し、機能の多様性を高めるために、多様な機能集約(DFA)コンポーネントを導入します。このような多様性は、不可欠な顕著なオブジェクトをマイニングするための基盤です。 2)DFA機能に基づいて、他の気を散らすオブジェクトを抑制しながら、不可欠な顕著なオブジェクトを強調する機能チャネルを強化することを目的として、整合性チャネル拡張(ICE)コンポーネントを導入します。 3)拡張された機能を抽出した後、パーツ全体の検証(PWV)メソッドを使用して、パーツとオブジェクト全体の機能が強く一致しているかどうかを判断します。このような部分全体の合意により、各顕著なオブジェクトのマイクロレベルの整合性をさらに向上させることができます。 ICONの有効性を実証するために、7つの挑戦的なベンチマークで包括的な実験が行われます。当社のICONは、幅広いメトリックの点でベースラインメソッドよりも優れています。特に、私たちのICONは、6つのデータセットで、平均偽陰性率(FNR)に関して、以前の最良のモデルよりも約10%の相対的な改善を達成しています。コードと結果は、https://github.com/mczhuge/ICONで入手できます。
Although current salient object detection (SOD) works have achieved significant progress, they are limited when it comes to the integrity of the predicted salient regions. We define the concept of integrity at both a micro and macro level. Specifically, at the micro level, the model should highlight all parts that belong to a certain salient object. Meanwhile, at the macro level, the model needs to discover all salient objects in a given image. To facilitate integrity learning for SOD, we design a novel Integrity Cognition Network (ICON), which explores three important components for learning strong integrity features. 1) Unlike existing models, which focus more on feature discriminability, we introduce a diverse feature aggregation (DFA) component to aggregate features with various receptive fields (i.e., kernel shape and context) and increase feature diversity. Such diversity is the foundation for mining the integral salient objects. 2) Based on the DFA features, we introduce an integrity channel enhancement (ICE) component with the goal of enhancing feature channels that highlight the integral salient objects, while suppressing the other distracting ones. 3) After extracting the enhanced features, the part-whole verification (PWV) method is employed to determine whether the part and whole object features have strong agreement. Such part-whole agreements can further improve the micro-level integrity for each salient object. To demonstrate the effectiveness of our ICON, comprehensive experiments are conducted on seven challenging benchmarks. Our ICON outperforms the baseline methods in terms of a wide range of metrics. Notably, our ICON achieves about 10% relative improvement over the previous best model in terms of average false negative ratio (FNR), on six datasets. Codes and results are available at: https://github.com/mczhuge/ICON.
updated: Mon Jun 13 2022 08:14:47 GMT+0000 (UTC)
published: Tue Jan 19 2021 14:53:12 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト