arXiv reaDer
単純なコピーアンドペーストは、インスタンスセグメンテーションのための強力なデータ拡張方法です
Simple Copy-Paste is a Strong Data Augmentation Method for Instance Segmentation
データ効率が高く、まれなオブジェクトカテゴリを処理できるインスタンスセグメンテーションモデルを構築することは、コンピュータビジョンにおける重要な課題です。データ拡張を活用することは、この課題に取り組むための有望な方向性です。ここでは、オブジェクトを画像にランダムに貼り付けるセグメンテーションなど、コピーアンドペーストの拡張([13、12])の体系的な調査を実行します。コピーアンドペーストに関する以前の研究は、オブジェクトを貼り付けるために周囲の視覚的コンテキストをモデル化することに依存していました。ただし、オブジェクトをランダムに貼り付ける単純なメカニズムで十分であり、強力なベースラインに加えて確実なゲインを提供できることがわかりました。さらに、コピーアンドペーストは、疑似ラベリング(セルフトレーニングなど)を通じて追加データを活用する半教師あり手法と相加的であることを示しています。 COCOインスタンスのセグメンテーションでは、49.1マスクAPと57.3ボックスAPを実現し、以前の最先端技術から+0.6マスクAPと+1.5ボックスAPを改善しました。さらに、コピーアンドペーストがLVISベンチマークの大幅な改善につながる可能性があることを示します。私たちのベースラインモデルは、まれなカテゴリでLVIS2020チャレンジの優勝エントリーを+3.6マスクAPで上回っています。
Building instance segmentation models that are data-efficient and can handle rare object categories is an important challenge in computer vision. Leveraging data augmentations is a promising direction towards addressing this challenge. Here, we perform a systematic study of the Copy-Paste augmentation ([13, 12]) for instance segmentation where we randomly paste objects onto an image. Prior studies on Copy-Paste relied on modeling the surrounding visual context for pasting the objects. However, we find that the simple mechanism of pasting objects randomly is good enough and can provide solid gains on top of strong baselines. Furthermore, we show Copy-Paste is additive with semi-supervised methods that leverage extra data through pseudo labeling (e.g. self-training). On COCO instance segmentation, we achieve 49.1 mask AP and 57.3 box AP, an improvement of +0.6 mask AP and +1.5 box AP over the previous state-of-the-art. We further demonstrate that Copy-Paste can lead to significant improvements on the LVIS benchmark. Our baseline model outperforms the LVIS 2020 Challenge winning entry by +3.6 mask AP on rare categories.
updated: Wed Jun 23 2021 05:13:04 GMT+0000 (UTC)
published: Sun Dec 13 2020 22:59:45 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト