視覚認識のための畳み込みニューラルネットワークは、大量のトレーニングサンプルを必要とし、通常はデータ拡張の恩恵を受けます。この論文では、グリッド状のパターンで画像のペアからパッチを構成することによって新しいサンプルを作成するデータ拡張方法であるPatchMixを提案します。これらの新しいサンプルのグラウンドトゥルースラベルは、各画像のパッチ数に比例して設定されます。次に、パッチレベルで一連の追加損失を追加して、パッチレベルと画像レベルの両方で適切な表現を正規化し、促進します。 PatchMixを使用してImageNetでトレーニングされたResNet-50モデルは、さまざまなベンチマークにわたって優れた転送学習機能を示します。 PatchMixは、混合のためにランダムなペアリングとランダムなグリッドのようなパターンに依存できますが、最適なグリッドのようなパターンと画像のペアリングを一緒に発見するためのガイド戦略として、進化的検索を検討します。この目的のために、各選択を評価するためにモデルを再トレーニングする必要性を回避する適応度関数を考案します。このように、PatchMixは、CIFAR-10(+1.91)、CIFAR-100(+5.31)、Tiny Imagenet(+3.52)、およびImageNet(+1.16)の基本モデルを大幅に上回り、以前の状態を上回っています。最先端のペアワイズ増強戦略。
Convolutional neural networks for visual recognition require large amounts of training samples and usually benefit from data augmentation. This paper proposes PatchMix, a data augmentation method that creates new samples by composing patches from pairs of images in a grid-like pattern. These new samples' ground truth labels are set as proportional to the number of patches from each image. We then add a set of additional losses at the patch-level to regularize and to encourage good representations at both the patch and image levels. A ResNet-50 model trained on ImageNet using PatchMix exhibits superior transfer learning capabilities across a wide array of benchmarks. Although PatchMix can rely on random pairings and random grid-like patterns for mixing, we explore evolutionary search as a guiding strategy to discover optimal grid-like patterns and image pairing jointly. For this purpose, we conceive a fitness function that bypasses the need to re-train a model to evaluate each choice. In this way, PatchMix outperforms a base model on CIFAR-10 (+1.91), CIFAR-100 (+5.31), Tiny Imagenet (+3.52), and ImageNet (+1.16) by significant margins, also outperforming previous state-of-the-art pairwise augmentation strategies.