既存のセマンティックセグメンテーションアプローチは印象的な結果を達成しますが、新しいカテゴリが発見されると、モデルを段階的に更新するのに苦労します。さらに、ピクセルごとの注釈は費用と時間がかかります。この論文は、セマンティックセグメンテーションのための弱インクリメンタル学習のための新しいフレームワークを提案します。これは、安価で広く利用可能な画像レベルのラベルから新しいクラスをセグメント化することを学習することを目的としています。疑似ラベルをオフラインで生成する必要がある既存のアプローチとは対照的に、画像レベルのラベルでトレーニングされ、セグメンテーションモデルによって正規化された補助分類器を使用して、オンラインで疑似監視を取得し、モデルを段階的に更新します。補助分類器によって生成されたソフトラベルを使用することにより、プロセスに固有のノイズに対処します。 Pascal VOCおよびCOCOデータセットに対するアプローチの有効性を示し、オフラインの弱教師あり手法を上回り、完全な教師あり学習手法に匹敵する結果を取得します。
Although existing semantic segmentation approaches achieve impressive results, they still struggle to update their models incrementally as new categories are uncovered. Furthermore, pixel-by-pixel annotations are expensive and time-consuming. This paper proposes a novel framework for Weakly Incremental Learning for Semantic Segmentation, that aims at learning to segment new classes from cheap and largely available image-level labels. As opposed to existing approaches, that need to generate pseudo-labels offline, we use an auxiliary classifier, trained with image-level labels and regularized by the segmentation model, to obtain pseudo-supervision online and update the model incrementally. We cope with the inherent noise in the process by using soft-labels generated by the auxiliary classifier. We demonstrate the effectiveness of our approach on the Pascal VOC and COCO datasets, outperforming offline weakly-supervised methods and obtaining results comparable with incremental learning methods with full supervision.