arXiv reaDer
少数のショットオブジェクト検出のための二重認識の注意
Dual-Awareness Attention for Few-Shot Object Detection
最近の進歩により、数ショット分類(FSC)のパフォーマンスが大幅に向上しましたが、最新の学習システムでは、数ショットオブジェクト検出(FSOD)が依然として困難です。既存のFSODシステムはFSCアプローチに従い、空間的変動や不確実な表現などの重大な問題を無視するため、パフォーマンスが低下します。これを観察して、ネットワークが与えられたサポート画像を適応的に解釈できるようにする新しいデュアルアウェアネスアテンション(DAnA)メカニズムを提案します。 DAnAは、サポート画像をクエリ位置認識(QPA)機能に変換し、クエリの各ローカル領域にカスタマイズされたサポート情報を割り当てることにより、検出ネットワークを正確にガイドします。さらに、提案されたDAnAコンポーネントは柔軟性があり、複数の既存のオブジェクト検出フレームワークに適応できます。 DAnAを採用することにより、従来のオブジェクト検出ネットワークであるFaster R-CNNとRetinaNetは、数ショットの学習用に明示的に設計されていないため、FSODタスクで最先端のパフォーマンスを実現します。以前の方法と比較して、私たちのモデルはパフォーマンスを47%(+ 6.9 AP)大幅に向上させ、さまざまな評価設定で優れた能力を示しています。
While recent progress has significantly boosted few-shot classification (FSC) performance, few-shot object detection (FSOD) remains challenging for modern learning systems. Existing FSOD systems follow FSC approaches, ignoring critical issues such as spatial variability and uncertain representations, and consequently result in low performance. Observing this, we propose a novel Dual-Awareness Attention (DAnA) mechanism that enables networks to adaptively interpret the given support images. DAnA transforms support images into query-position-aware (QPA) features, guiding detection networks precisely by assigning customized support information to each local region of the query. In addition, the proposed DAnA component is flexible and adaptable to multiple existing object detection frameworks. By adopting DAnA, conventional object detection networks, Faster R-CNN and RetinaNet, which are not designed explicitly for few-shot learning, reach state-of-the-art performance in FSOD tasks. In comparison with previous methods, our model significantly increases the performance by 47% (+6.9 AP), showing remarkable ability under various evaluation settings.
updated: Thu Sep 16 2021 03:02:15 GMT+0000 (UTC)
published: Wed Feb 24 2021 09:17:27 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト