ミックスアップは、ディープニューラルネットワークで人気のあるデータ依存の拡張手法であり、ミックスアップの生成と分類の2つのサブタスクが含まれています。コミュニティは通常、混合を教師あり学習(SL)に限定し、生成サブタスクの目的は、データ多様体全体を考慮するのではなく、サンプリングされたペアに固定されます。このような制限を克服するために、2つのサブタスクの目的を体系的に研究し、SAMixという名前のSLシナリオと自己監視学習(SSL)シナリオの両方のシナリオアゴスティック相互作用を提案します。具体的には、他のクラスからのグローバルな差別の対象となる2つのクラス間のローカルな滑らかさを最適化することとして、ミックスアップ生成の主要な目的を仮定して検証します。この発見に基づいて、2つのサブタスクの補完的なトレーニングのためにηバランスのとれた混合損失が提案されます。一方、生成サブタスクは、最適化可能なモジュールであるMixerとしてパラメーター化されます。このモジュールは、アテンションメカニズムを利用して、ラベルに依存せずに混合サンプルを生成します。 SLおよびSSLタスクに関する広範な実験は、SAMixが一貫して主要なメソッドを大幅に上回っていることを示しています。
Mixup is a popular data-dependent augmentation technique for deep neural networks, which contains two sub-tasks, mixup generation and classification. The community typically confines mixup to supervised learning (SL) and the objective of generation sub-task is fixed to the sampled pairs instead of considering the whole data manifold. To overcome such limitations, we systematically study the objectives of two sub-tasks and propose Scenario-Agostic Mixup for both SL and Self-supervised Learning (SSL) scenarios, named SAMix. Specifically, we hypothesize and verify the core objective of mixup generation as optimizing the local smoothness between two classes subject to global discrimination from other classes. Based on this discovery, η-balanced mixup loss is proposed for complementary training of the two sub-tasks. Meanwhile, the generation sub-task is parameterized as an optimizable module, Mixer, which utilizes an attention mechanism to generate mixed samples without label dependency. Extensive experiments on SL and SSL tasks demonstrate that SAMix consistently outperforms leading methods by a large margin.