ディープ ロングテール ラーニングは、実用的な実世界の不均衡な分布で有用なディープ ネットワークをトレーニングすることを目的としています。この分布では、テール クラスのほとんどのラベルが少数のサンプルに関連付けられています。ロングテール分布の視覚認識用に識別モデルをトレーニングするための大量の作業が行われています。対照的に、ロングテール分布の画像生成モデルのクラスである条件付き生成的敵対ネットワークのトレーニングを目指しています。認識と同様に、画像生成の最先端の方法もテールクラスのパフォーマンス低下に悩まされていることがわかりました。パフォーマンスの低下は主に、テール クラスのクラス固有のモード崩壊によるものであり、これは、条件付けパラメーター マトリックスのスペクトル爆発と相関することが観察されています。モードの崩壊を緩和するスペクトル爆発を防止する新しいグループ スペクトル レギュラライザー (gSR) を提案します。これにより、テール クラスでも多様でもっともらしい画像が生成されます。 gSR が既存の増強および正則化技術と効果的に組み合わされ、ロングテール データで最先端の画像生成パフォーマンスが得られることがわかりました。広範な実験により、さまざまな程度の不均衡を持つロングテール データセットに対するレギュラーライザーの有効性が実証されています。
Deep long-tailed learning aims to train useful deep networks on practical, real-world imbalanced distributions, wherein most labels of the tail classes are associated with a few samples. There has been a large body of work to train discriminative models for visual recognition on long-tailed distribution. In contrast, we aim to train conditional Generative Adversarial Networks, a class of image generation models on long-tailed distributions. We find that similar to recognition, state-of-the-art methods for image generation also suffer from performance degradation on tail classes. The performance degradation is mainly due to class-specific mode collapse for tail classes, which we observe to be correlated with the spectral explosion of the conditioning parameter matrix. We propose a novel group Spectral Regularizer (gSR) that prevents the spectral explosion alleviating mode collapse, which results in diverse and plausible image generation even for tail classes. We find that gSR effectively combines with existing augmentation and regularization techniques, leading to state-of-the-art image generation performance on long-tailed data. Extensive experiments demonstrate the efficacy of our regularizer on long-tailed datasets with different degrees of imbalance.