arXiv reaDer
マルチレベルCNN機能の役割の再定義による改善された少数ショットセグメンテーション
Improved Few-shot Segmentation by Redifinition of the Roles of Multi-level CNN Features
この調査は、数ショットのセグメンテーション、つまり、インスタンスのサポートイメージが与えられた場合に、クエリイメージ内の見えないオブジェクトクラスの領域をセグメント化することに関係しています。現在の方法は、サポートイメージとクエリイメージの事前トレーニング済みのCNN機能に依存しています。優れたパフォーマンスの鍵は、中レベルと高レベルの機能の適切な融合に依存します。前者には形状指向の情報が含まれ、後者にはクラス指向の情報が含まれます。現在の最先端の方法は、Tian et al。のアプローチに従っており、中レベルの機能に主な役割を与え、高レベルの機能に副次的な役割を与えます。このホワイトペーパーでは、マルチレベル機能の役割を再定義することにより、この広く採用されているアプローチを再解釈します。プライマリとセカンダリの役割を交換します。具体的には、現在の方法では、中レベルの機能を使用して高レベルの機能から生成された初期推定が改善されると考えています。この再解釈は、現在の方法の新しいアプリケーションを示唆しています。同じネットワークを複数回適用して、オブジェクトの領域の推定値を最初の推定値から繰り返し更新します。私たちの実験は、この方法が効果的であり、1ショットおよび5ショット設定のCOCO-20 ^ iと、1ショット設定のPASCAL-5 ^ iの以前の最先端技術を更新したことを示しています。
This study is concerned with few-shot segmentation, i.e., segmenting the region of an unseen object class in a query image, given support image(s) of its instances. The current methods rely on the pretrained CNN features of the support and query images. The key to good performance depends on the proper fusion of their mid-level and high-level features; the former contains shape-oriented information, while the latter has class-oriented information. Current state-of-the-art methods follow the approach of Tian et al., which gives the mid-level features the primary role and the high-level features the secondary role. In this paper, we reinterpret this widely employed approach by redifining the roles of the multi-level features; we swap the primary and secondary roles. Specifically, we regard that the current methods improve the initial estimate generated from the high-level features using the mid-level features. This reinterpretation suggests a new application of the current methods: to apply the same network multiple times to iteratively update the estimate of the object's region, starting from its initial estimate. Our experiments show that this method is effective and has updated the previous state-of-the-art on COCO-20^i in the 1-shot and 5-shot settings and on PASCAL-5^i in the 1-shot setting.
updated: Tue Sep 14 2021 04:47:08 GMT+0000 (UTC)
published: Tue Sep 14 2021 04:47:08 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト