arXiv reaDer
CIAN: Cross-Image Affinity Net for Weakly Supervised Semantic Segmentation
 画像レベルのラベルのみを使用した弱い監視セマンティックセグメンテーションにより、ピクセルレベルのラベルに注釈を付けるための大きな労力を節約できます。最先端のアプローチは、さまざまな革新的な制約とヒューリスティックルールに依存して、すべての画像のマスクを生成します。これらの方法は大きな進歩を遂げましたが、各画像を個別に扱い、異なる画像間の関係を考慮していません。ただし、このペーパーでは、クロスイメージの関係は、弱く監督されたセグメンテーションに不可欠であると主張します。画像間で関連する領域を接続するため、補足表現を伝播して、より一貫性のある不可欠な領域を取得できます。この情報を活用するために、エンドツーエンドのクロスイメージアフィニティモジュールを提案します。これは、イメージレベルのラベルのみでピクセルレベルのクロスイメージ関係を活用します。これにより、私たちのアプローチは、Pascal VOC 2012の検証とテストセットでそれぞれ64.3%と65.3%mIoUを達成します。これは、弱く監督されたセマンティックセグメンテーションに画像レベルのラベルを使用するだけの新しい最先端の結果です。アプローチの優位性。
Weakly supervised semantic segmentation with only image-level labels saves large human effort to annotate pixel-level labels. Cutting-edge approaches rely on various innovative constraints and heuristic rules to generate the masks for every single image. Although great progress has been achieved by these methods, they treat each image independently and do not take account of the relationships across different images. In this paper, however, we argue that the cross-image relationship is vital for weakly supervised segmentation. Because it connects related regions across images, where supplementary representations can be propagated to obtain more consistent and integral regions. To leverage this information, we propose an end-to-end cross-image affinity module, which exploits pixel-level cross-image relationships with only image-level labels. By means of this, our approach achieves 64.3% and 65.3% mIoU on Pascal VOC 2012 validation and test set respectively, which is a new state-of-the-art result by only using image-level labels for weakly supervised semantic segmentation, demonstrating the superiority of our approach.
updated: Thu Jan 30 2020 06:10:51 GMT+0000 (UTC)
published: Tue Nov 27 2018 07:03:12 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト