ロングテールインスタンスセグメンテーションの最近の方法は、トレーニングデータがほとんどないまれなオブジェクトクラスで依然として苦労しています。特にまれなクラスの特徴空間を拡張することにより、データ不足の問題に対処する、シンプルでありながら効果的な方法である特徴拡張およびサンプリング適応(FASA)を提案します。特徴増強(FA)と特徴サンプリングコンポーネントの両方が実際のトレーニングステータスに適応します-FAは、過去の反復から観測された実際のサンプルの特徴平均と分散によって通知され、生成された仮想特徴を損失適応方法でサンプリングします過剰適合を避けるため。 FASAは、複雑な損失設計を必要とせず、多くの場合、高コストで手動で定義されたヘッド/テールクラスグループを伴うクラス間転送学習の必要性を排除します。 FASAは、標準またはロングテールのセグメンテーションフレームワークに簡単にプラグインでき、一貫したパフォーマンスの向上とわずかな追加コストで、高速で汎用的な方法であることを示しています。 FASAは、最先端のパフォーマンスを備えたロングテール分類などの他のタスクにも適用できます。コードがリリースされます。
Recent methods for long-tailed instance segmentation still struggle on rare object classes with few training data. We propose a simple yet effective method, Feature Augmentation and Sampling Adaptation (FASA), that addresses the data scarcity issue by augmenting the feature space especially for rare classes. Both the Feature Augmentation (FA) and feature sampling components are adaptive to the actual training status -- FA is informed by the feature mean and variance of observed real samples from past iterations, and we sample the generated virtual features in a loss-adapted manner to avoid over-fitting. FASA does not require any elaborate loss design, and removes the need for inter-class transfer learning that often involves large cost and manually-defined head/tail class groups. We show FASA is a fast, generic method that can be easily plugged into standard or long-tailed segmentation frameworks, with consistent performance gains and little added cost. FASA is also applicable to other tasks like long-tailed classification with state-of-the-art performance. Code will be released.