普及している共顕著性検出システムの長年の問題を明らかにします。トレーニングとテストの間には確かに矛盾があります。高品質の共顕著性検出データセットの構築には、時間と労力を要するピクセルレベルのラベリングが含まれるため、最近の作業では、トレーニングのためにセマンティックセグメンテーションまたは顕著性検出データセットに依存する必要があります。ただし、適切な共顕著性の欠如と、これらのデータセットに複数の前景オブジェクトがないことは、モデルによって学習された偽の変動と固有のバイアスにつながる可能性があります。これに取り組むために、コンテキスト調整による反事実的トレーニングのアイデアを紹介し、既製の顕著性検出データセットからの画像を活用して新しいサンプルを合成する「コストフリー」のグループカットペースト(GCP)手順を提案します。 GCPに続いて、コンテキスト調整トレーニング(CAT)と呼ばれる新しいデータセットを収集します。 CATは33,500枚の画像で構成されており、現在の共顕著性検出データセットの4倍の大きさになっています。すべての画像には、高品質のマスク注釈、オブジェクトカテゴリ、およびエッジマップが自動的に注釈されます。データセットの優位性を実証するために、最先端のモデルを使用した広範な実験が実施されています。データセットの規模、多様性、品質が、この分野およびそれ以降の研究者に役立つことを願っています。データセットとベンチマークツールキットは、プロジェクトページから一般公開されます。
We unveil a long-standing problem in the prevailing co-saliency detection systems: there is indeed inconsistency between training and testing. Constructing a high-quality co-saliency detection dataset involves time-consuming and labor-intensive pixel-level labeling, which has forced most recent works to rely instead on semantic segmentation or saliency detection datasets for training. However, the lack of proper co-saliency and the absence of multiple foreground objects in these datasets can lead to spurious variations and inherent biases learned by models. To tackle this, we introduce the idea of counterfactual training through context adjustment, and propose a "cost-free" group-cut-paste (GCP) procedure to leverage images from off-the-shelf saliency detection datasets and synthesize new samples. Following GCP, we collect a novel dataset called Context Adjustment Training (CAT). CAT consists of 33,500 images, making it four times larger than the current co-saliency detection datasets. All images are automatically annotated with high-quality mask annotations, object categories, and edge maps. Extensive experiments with state-of-the-art models are conducted to demonstrate the superiority of our dataset. We hope that the scale, diversity, and quality of our dataset can benefit researchers in this area and beyond. The dataset and benchmark toolkit will be publicly accessible through our project page.