arXiv reaDer
顕著なインスタンスのセグメンテーションのための領域およびボックスレベルのアノテーションを使用した弱く監視された学習
Weakly Supervised Learning with Region and Box-level Annotations for Salient Instance Segmentation
顕著インスタンスのセグメンテーションは、顕著性検出領域で幅広い注目を集めた新しい挑戦的なタスクです。既存のデータセットの規模は限られているため、マスクアノテーションのコストが高いため、顕著なインスタンスのニューラルネットワークを完全にトレーニングすることは困難です。このペーパーでは、面倒なラベリングに頼らずに、監視の弱いソースによって顕著なインスタンスセグメンテーションフレームワークをトレーニングすることをアピールします。バイナリの顕著領域と既存の顕著性検出データセットからの境界ボックスの組み合わせによって監視される周期的なグローバルコンテキスト顕著インスタンスセグメンテーションネットワーク(CGCNet)を提示します。ピクセルレベルの正確な位置を取得するために、各特徴インスタンスのコンテキストフィーチャーを画像内のグローバルコンテキストに拡張するグローバルフィーチャーリファインレイヤーが導入されています。一方、ラベリング更新スキームは、次の反復のために弱い注釈をオンラインで更新するために、提案されたフレームワークに組み込まれています。実験結果は、弱く監視されたアノテーションによってトレーニングされた提案されたエンドツーエンドネットワークが、既存の完全に監視された顕著なインスタンスセグメンテーション手法と競合できることを示しています。ベルとホイッスルがなければ、提案された方法は57.13%のマスクAPを達成します。これは、完全に監視された最良の方法よりも優れており、監視が弱い顕著インスタンスセグメンテーションの新しい技術を確立します。
Salient instance segmentation is a new challenging task that received widespread attention in saliency detection area. Due to the limited scale of the existing dataset and the high mask annotations cost, it is difficult to train a salient instance neural network completely. In this paper, we appeal to train a salient instance segmentation framework by a weakly supervised source without resorting to laborious labeling. We present a cyclic global context salient instance segmentation network (CGCNet), which is supervised by the combination of the binary salient regions and bounding boxes from the existing saliency detection datasets. For a precise pixel-level location, a global feature refining layer is introduced that dilates the context features of each salient instance to the global context in the image. Meanwhile, a labeling updating scheme is embedded in the proposed framework to online update the weak annotations for next iteration. Experiment results demonstrate that the proposed end-to-end network trained by weakly supervised annotations can be competitive to the existing fully supervised salient instance segmentation methods. Without bells and whistles, our proposed method achieves a mask AP of 57.13%, which outperforms the best fully supervised methods and establishes new states of the art for weakly supervised salient instance segmentation.
updated: Tue Dec 15 2020 06:41:52 GMT+0000 (UTC)
published: Wed Aug 19 2020 03:43:45 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト