arXiv reaDer
少数ショットのローカリゼーションと分類のための典型的な地域提案ネットワーク
Prototypical Region Proposal Networks for Few-Shot Localization and Classification
最近提案された数ショットの画像分類方法は、一般に、分類されるオブジェクトが画像の中心的な主題であるユースケースに焦点を合わせてきた。このユースケースに沿ったベンチマークビジョンデータセットでの成功にもかかわらず、これらの方法は通常、高密度に注釈が付けられた忙しい画像を含むユースケースでは失敗します。潜在的な関心の他のクラスに属する他の付随的なオブジェクトの中で。関連するオブジェクトをローカライズするために、ラベルのないクエリ画像のエンコードされた特徴をサポートクラスの重心と比較するプロトタイプベースの数ショットセグメンテーションモデルを使用して、クエリ画像内のサポートセットクラスの存在と場所を示す領域提案を生成します。これらの領域提案は、数ショットの画像分類器への追加の条件付け入力として使用されます。 2つの段階(セグメンテーションと分類)をエンドツーエンドの分類モデル(PRoPnet)に統合するフレームワークを開発し、複数のオブジェクトクラスを含む自然シーンを含む画像データセットの精度が向上することを実証的に示します。
Recently proposed few-shot image classification methods have generally focused on use cases where the objects to be classified are the central subject of images. Despite success on benchmark vision datasets aligned with this use case, these methods typically fail on use cases involving densely-annotated, busy images: images common in the wild where objects of relevance are not the central subject, instead appearing potentially occluded, small, or among other incidental objects belonging to other classes of potential interest. To localize relevant objects, we employ a prototype-based few-shot segmentation model which compares the encoded features of unlabeled query images with support class centroids to produce region proposals indicating the presence and location of support set classes in a query image. These region proposals are then used as additional conditioning input to few-shot image classifiers. We develop a framework to unify the two stages (segmentation and classification) into an end-to-end classification model -- PRoPnet -- and empirically demonstrate that our methods improve accuracy on image datasets with natural scenes containing multiple object classes.
updated: Thu Apr 08 2021 04:03:30 GMT+0000 (UTC)
published: Thu Apr 08 2021 04:03:30 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト