arXiv reaDer
一般化された共顕著物体検出
Generalised Co-Salient Object Detection
我々は、共有の共通顕著物体を示さない「ノイズの多い画像」の存在を許容することにより、従来の共通顕著物体検出(CoSOD)設定における仮定を緩和する新しい設定を提案します。この新しい設定を一般化共顕著物体検出 (GCoSOD) と呼びます。我々は、画像間に共顕著物体が存在しないことの認識を CoSOD モデルに抽出するための、新しいランダム サンプリング ベースの一般化 CoSOD トレーニング (GCT) 戦略を提案します。これは、提供された教師あり共顕著性ラベルに加えて、ノイズの多い画像 (ヌル、つまり共顕著性オブジェクトが存在しない) に対して追加の自己教師ありラベルを導入する、多様なサンプリング自己教師あり学習 (DS3L) を採用しています。さらに、GCT に固有のランダム サンプリング プロセスにより、インスタンス レベルでの潜在的な誤検知予測を強調表示する高品質の不確実性マップの生成が可能になります。 GCoSOD 設定の下で CoSOD モデルのパフォーマンスを評価するために、CoCA-Common と CoCA-Zero という 2 つの新しいテスト データセットを提案します。共通の顕著なオブジェクトが前者には部分的に存在し、後者には完全に存在しません。広範な実験により、私たちが提案した方法は、GCoSOD設定下でのパフォーマンスとモデルの校正度の点でCoSODモデルのパフォーマンスを大幅に向上させることが実証されました。
We propose a new setting that relaxes an assumption in the conventional Co-Salient Object Detection (CoSOD) setting by allowing the presence of "noisy images" which do not show the shared co-salient object. We call this new setting Generalised Co-Salient Object Detection (GCoSOD). We propose a novel random sampling based Generalised CoSOD Training (GCT) strategy to distill the awareness of inter-image absence of co-salient objects into CoSOD models. It employs a Diverse Sampling Self-Supervised Learning (DS3L) that, in addition to the provided supervised co-salient label, introduces additional self-supervised labels for noisy images (being null, that no co-salient object is present). Further, the random sampling process inherent in GCT enables the generation of a high-quality uncertainty map highlighting potential false-positive predictions at instance level. To evaluate the performance of CoSOD models under the GCoSOD setting, we propose two new testing datasets, namely CoCA-Common and CoCA-Zero, where a common salient object is partially present in the former and completely absent in the latter. Extensive experiments demonstrate that our proposed method significantly improves the performance of CoSOD models in terms of the performance under the GCoSOD setting as well as the model calibration degrees.
updated: Fri Aug 11 2023 04:40:10 GMT+0000 (UTC)
published: Sat Aug 20 2022 12:23:32 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト