arXiv reaDer
ロングテール認識のためのプロトタイプ分類器の学習
Learning Prototype Classifiers for Long-Tailed Recognition
ロングテール認識 (LTR) の問題は、現実世界のオブジェクトの基本的なべき乗則分布により、近年注目を集めています。 LTR の最近の研究では、分類器のノルムと特定のクラスのトレーニング データの量を相関させるという点で偏ったソフトマックス分類器が使用されています。この研究では、プロトタイプ分類器を学習することで LTR の偏ったソフトマックス問題に対処できることを示します。プロトタイプ分類器は、プロトタイプが経験的重心である特殊なケースである最近接クラス平均 (NCM) を使用するだけで有望な結果を提供できます。私たちはさらに一歩進んで、表現空間内のプロトタイプまでの距離を分類用のロジット スコアとして使用することにより、プロトタイプを共同学習することを提案します。さらに、外れ値に対してロバストな安定した勾配ベースの最適化につながるユークリッド距離ベースのプロトタイプ分類器の特性を理論的に分析します。各チャネルに沿った独立した距離スケールを有効にするために、チャネル依存の温度パラメータを学習することでプロトタイプ分類器を強化します。私たちの分析では、プロトタイプ分類器によって学習されたプロトタイプは、経験的な重心よりも適切に分離されることが示されています。 4 つの LTR ベンチマークの結果は、プロトタイプ分類器が最先端の手法を上回るパフォーマンス、または同等であることを示しています。私たちのコードは https://github.com/saurabhsharma1993/prototype-classifier-ltr で入手できます。
The problem of long-tailed recognition (LTR) has received attention in recent years due to the fundamental power-law distribution of objects in the real-world. Most recent works in LTR use softmax classifiers that are biased in that they correlate classifier norm with the amount of training data for a given class. In this work, we show that learning prototype classifiers addresses the biased softmax problem in LTR. Prototype classifiers can deliver promising results simply using Nearest-Class- Mean (NCM), a special case where prototypes are empirical centroids. We go one step further and propose to jointly learn prototypes by using distances to prototypes in representation space as the logit scores for classification. Further, we theoretically analyze the properties of Euclidean distance based prototype classifiers that lead to stable gradient-based optimization which is robust to outliers. To enable independent distance scales along each channel, we enhance Prototype classifiers by learning channel-dependent temperature parameters. Our analysis shows that prototypes learned by Prototype classifiers are better separated than empirical centroids. Results on four LTR benchmarks show that Prototype classifier outperforms or is comparable to state-of-the-art methods. Our code is made available at https://github.com/saurabhsharma1993/prototype-classifier-ltr.
updated: Mon Jun 26 2023 05:42:36 GMT+0000 (UTC)
published: Wed Feb 01 2023 15:02:58 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト