実世界のトレーニングデータは通常、ロングテール分布を示します。ここでは、いくつかの多数派クラスが残りの少数派クラスよりもかなり多くのサンプルを持っています。この不均衡は、バランスの取れたトレーニングセット用に設計された典型的な教師あり学習アルゴリズムのパフォーマンスを低下させます。この論文では、最近提案された暗黙のセマンティックデータ拡張(ISDA)アルゴリズムでマイノリティクラスを拡張することでこの問題に対処します。このアルゴリズムは、多くの意味的に意味のある方向に沿って深い特徴を変換することにより、多様な拡張サンプルを生成します。重要なことに、ISDAがセマンティックな方向を取得するためにクラス条件付き統計を推定することを考えると、トレーニングデータが不十分なため、マイノリティクラスでこれを行うことは効果的ではありません。この目的のために、メタ学習を使用して変換された意味方向を自動的に学習するための新しいアプローチを提案します。具体的には、トレーニング中の拡張戦略は動的に最適化され、メタ更新ステップで概算される小さなバランスの取れた検証セットでの損失を最小限に抑えることを目的としています。 CIFAR-LT-10 / 100、ImageNet-LT、およびiNaturalist 2017/2018に関する広範な経験的結果により、この方法の有効性が検証されます。
Real-world training data usually exhibits long-tailed distribution, where several majority classes have a significantly larger number of samples than the remaining minority classes. This imbalance degrades the performance of typical supervised learning algorithms designed for balanced training sets. In this paper, we address this issue by augmenting minority classes with a recently proposed implicit semantic data augmentation (ISDA) algorithm, which produces diversified augmented samples by translating deep features along many semantically meaningful directions. Importantly, given that ISDA estimates the class-conditional statistics to obtain semantic directions, we find it ineffective to do this on minority classes due to the insufficient training data. To this end, we propose a novel approach to learn transformed semantic directions with meta-learning automatically. In specific, the augmentation strategy during training is dynamically optimized, aiming to minimize the loss on a small balanced validation set, which is approximated via a meta update step. Extensive empirical results on CIFAR-LT-10/100, ImageNet-LT, and iNaturalist 2017/2018 validate the effectiveness of our method.