ロングテール学習は、実世界のシナリオでの深刻なクラスの不均衡の下で、ヘッドクラスがトレーニング手順を支配するという重大な課題に取り組むことを目的としています。ただし、表現空間でのヘッド クラスの優位性の重大度を定量化する方法については、ほとんど注意が払われていません。これに動機付けられて、コサインベースの分類器を vMF 分類器と呼ばれるフォン ミーゼス-フィッシャー (vMF) 混合モデルに一般化します。私たちの知る限り、これは分布重複係数の観点から分類器と特徴の表現品質を測定する最初の作業です。その上で、分類器の重み間の干渉を軽減し、特徴を分類器の重みに揃えるために、クラス間不一致とクラス機能の整合性損失項を定式化します。さらに、新しいトレーニング後のキャリブレーション アルゴリズムが考案され、クラス間のオーバーラップ係数を介してゼロコストでパフォーマンスを向上させます。私たちの方法は、以前の研究を大幅に上回り、ロングテール画像分類、セマンティック セグメンテーション、およびインスタンス セグメンテーション タスクで最先端のパフォーマンスを達成します (たとえば、ImageNet-LT の ResNetXt-50 で 55.0% の全体精度を達成します)。 )。コードは https://github.com/VipaiLab/vMF\_OP で入手できます。
Long-tailed learning aims to tackle the crucial challenge that head classes dominate the training procedure under severe class imbalance in real-world scenarios. However, little attention has been given to how to quantify the dominance severity of head classes in the representation space. Motivated by this, we generalize the cosine-based classifiers to a von Mises-Fisher (vMF) mixture model, denoted as vMF classifier, which enables to quantitatively measure representation quality upon the hyper-sphere space via calculating distribution overlap coefficient. To our knowledge, this is the first work to measure representation quality of classifiers and features from the perspective of distribution overlap coefficient. On top of it, we formulate the inter-class discrepancy and class-feature consistency loss terms to alleviate the interference among the classifier weights and align features with classifier weights. Furthermore, a novel post-training calibration algorithm is devised to zero-costly boost the performance via inter-class overlap coefficients. Our method outperforms previous work with a large margin and achieves state-of-the-art performance on long-tailed image classification, semantic segmentation, and instance segmentation tasks (e.g., we achieve 55.0% overall accuracy with ResNetXt-50 in ImageNet-LT). Our code is available at https://github.com/VipaiLab/vMF\_OP.