arXiv reaDer
MuSCLe:弱教師ありセマンティックセグメンテーションのためのマルチ戦略対照学習フレームワーク
MuSCLe: A Multi-Strategy Contrastive Learning Framework for Weakly Supervised Semantic Segmentation
弱教師ありセグメンテーション(WSSS)は、教師ありセグメンテーション(SSS)メソッドで必要なピクセルレベルの注釈ではなく、画像レベルの注釈などの弱いラベルのみに依存するため、非常に人気があります。注釈コストが大幅に削減されたにもかかわらず、WSSSから学習した典型的な特徴表現は、オブジェクトのいくつかの顕著な部分を表すだけであり、トレーニング中のガイダンスが弱いため、SSSと比較して信頼性が低くなります。この論文では、画像、領域、ピクセル、オブジェクトの境界レベルで対照的なサンプルペアの類似性と非類似性を活用することにより、拡張された機能表現を取得し、WSSSパフォーマンスを向上させる新しいマルチ戦略対照学習(MuSCLe)フレームワークを提案します。広範な実験により、私たちの方法の有効性が実証され、MuSCLeが広く使用されているPASCAL VOC2012データセットの現在の最先端技術を上回っていることを示しています。
Weakly supervised semantic segmentation (WSSS) has gained significant popularity since it relies only on weak labels such as image level annotations rather than pixel level annotations required by supervised semantic segmentation (SSS) methods. Despite drastically reduced annotation costs, typical feature representations learned from WSSS are only representative of some salient parts of objects and less reliable compared to SSS due to the weak guidance during training. In this paper, we propose a novel Multi-Strategy Contrastive Learning (MuSCLe) framework to obtain enhanced feature representations and improve WSSS performance by exploiting similarity and dissimilarity of contrastive sample pairs at image, region, pixel and object boundary levels. Extensive experiments demonstrate the effectiveness of our method and show that MuSCLe outperforms the current state-of-the-art on the widely used PASCAL VOC 2012 dataset.
updated: Tue Jan 18 2022 14:38:50 GMT+0000 (UTC)
published: Tue Jan 18 2022 14:38:50 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト