リモート センシング画像のオブジェクト検出は、トレーニング用の大量のラベル付きデータに依存しています。増え続ける新しいカテゴリとクラスの不均衡により、網羅的な注釈はスケーラブルではなくなります。 Few-shot object detection~(FSOD) は、見られた基本クラスでメタ学習を行い、ラベル付けされたサンプルがほとんどない新しいクラスを微調整することで、この問題に取り組みます。ただし、オブジェクトのスケールと方向の変化は、リモート センシング画像では特に大きく、既存の少数ショット オブジェクト検出方法に課題をもたらします。これらの課題に取り組むために、最初に機能ピラミッド ネットワークを統合し、プロトタイプ機能を使用してクエリ機能を強調表示し、既存の FSOD メソッドを改善することを提案します。変更された FSOD を強力なベースラインと呼び、元のベースラインよりも大幅に優れたパフォーマンスを発揮することが実証されています。方向変動のロバスト性を改善するために、ネットワークが幾何学的変換に対して不変であることを可能にする変換不変ネットワーク(TINet)をさらに提案します。広く使用されている 3 つのリモート センシング オブジェクト検出データセット、つまり NWPU VHR-10.v2、DIOR、および HRRSD に対する広範な実験により、提案された方法の有効性が実証されました。最後に、リモート センシング画像の複数の FSOD メソッドを再現して、フォローアップ作業のための広範なベンチマークを作成しました。
Object detection in remote sensing images relies on a large amount of labeled data for training. The growing new categories and class imbalance render exhaustive annotation non-scalable. Few-shot object detection~(FSOD) tackles this issue by meta-learning on seen base classes and then fine-tuning on novel classes with few labeled samples. However, the object's scale and orientation variations are particularly large in remote sensing images, thus posing challenges to existing few-shot object detection methods. To tackle these challenges, we first propose to integrate a feature pyramid network and use prototype features to highlight query features to improve upon existing FSOD methods. We refer to the modified FSOD as a Strong Baseline which is demonstrated to perform significantly better than the original baselines. To improve the robustness of orientation variation, we further propose a transformation-invariant network (TINet) to allow the network to be invariant to geometric transformations. Extensive experiments on three widely used remote sensing object detection datasets, i.e., NWPU VHR-10.v2, DIOR, and HRRSD demonstrated the effectiveness of the proposed method. Finally, we reproduced multiple FSOD methods for remote sensing images to create an extensive benchmark for follow-up works.