複数のタスクを使用した深いコミュニティ学習に基づいた、弱教師ありインスタンスセグメンテーションアルゴリズムを紹介します。このタスクは、弱教師ありオブジェクト検出とセマンティックセグメンテーションの組み合わせとして定式化され、同じクラスの個々のオブジェクトが個別に識別およびセグメント化されます。この問題に対処するために、境界ボックス回帰、インスタンスマスク生成、インスタンスセグメンテーション、および特徴抽出を備えたオブジェクト検出の正のフィードバックループを備えた統合ディープニューラルネットワークアーキテクチャを設計します。ネットワークの各コンポーネントは、他のコンポーネントとアクティブに相互作用して精度を向上させ、モデルのエンドツーエンドのトレーニング可能性により、結果がより堅牢で再現性のあるものになります。提案されたアルゴリズムは、標準のベンチマークデータセットでFastR-CNNやMaskR-CNNなどの追加のトレーニングを行うことなく、弱く監視された設定で最先端のパフォーマンスを実現します。私たちのアルゴリズムの実装は、プロジェクトのWebページ(https://cv.snu.ac.kr/research/WSIS_CL)で入手できます。
We present a weakly supervised instance segmentation algorithm based on deep community learning with multiple tasks. This task is formulated as a combination of weakly supervised object detection and semantic segmentation, where individual objects of the same class are identified and segmented separately. We address this problem by designing a unified deep neural network architecture, which has a positive feedback loop of object detection with bounding box regression, instance mask generation, instance segmentation, and feature extraction. Each component of the network makes active interactions with others to improve accuracy, and the end-to-end trainability of our model makes our results more robust and reproducible. The proposed algorithm achieves state-of-the-art performance in the weakly supervised setting without any additional training such as Fast R-CNN and Mask R-CNN on the standard benchmark dataset. The implementation of our algorithm is available on the project webpage: https://cv.snu.ac.kr/research/WSIS_CL.