arXiv reaDer
Zero-Shot Instance Segmentation
ディープラーニングにより、ラベル付けされたデータが豊富なインスタンスセグメンテーションの精度が大幅に向上しました。ただし、医療や製造などの多くの分野では、十分なデータを収集することは非常に困難であり、このデータにラベルを付けるには高度な専門スキルが必要です。この動機に従い、ゼロショットインスタンスセグメンテーション(ZSI)という名前の新しいタスクセットを提案します。 ZSIのトレーニングフェーズでは、モデルは表示されたデータを使用してトレーニングされますが、テストフェーズでは、すべての表示されたインスタンスと表示されていないインスタンスをセグメント化するために使用されます。最初にZSIタスクを定式化し、ゼロショット検出器、セマンティックマスクヘッド、バックグラウンド認識RPN、および同期バックグラウンド戦略で構成される、課題に取り組む方法を提案します。 MS-COCOデータセットに基づくゼロショットインスタンスセグメンテーションの新しいベンチマークを提示します。このベンチマークの広範な経験的結果は、私たちの方法がゼロショットオブジェクト検出タスクの最先端の結果を超えるだけでなく、ZSIで有望なパフォーマンスを達成することを示しています。私たちのアプローチは確かなベースラインとして機能し、ゼロショットインスタンスセグメンテーションの将来の研究を容易にします。
Deep learning has significantly improved the precision of instance segmentation with abundant labeled data. However, in many areas like medical and manufacturing, collecting sufficient data is extremely hard and labeling this data requires high professional skills. We follow this motivation and propose a new task set named zero-shot instance segmentation (ZSI). In the training phase of ZSI, the model is trained with seen data, while in the testing phase, it is used to segment all seen and unseen instances. We first formulate the ZSI task and propose a method to tackle the challenge, which consists of Zero-shot Detector, Semantic Mask Head, Background Aware RPN and Synchronized Background Strategy. We present a new benchmark for zero-shot instance segmentation based on the MS-COCO dataset. The extensive empirical results in this benchmark show that our method not only surpasses the state-of-the-art results in zero-shot object detection task but also achieves promising performance on ZSI. Our approach will serve as a solid baseline and facilitate future research in zero-shot instance segmentation.
updated: Wed Apr 14 2021 03:02:48 GMT+0000 (UTC)
published: Wed Apr 14 2021 03:02:48 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト