最近のデータ拡張の進歩により、ソース ドメインとターゲット ドメインの間のマッピングを学習することで、画像を翻訳できるようになりました。既存の方法は、さまざまなデータセットでモデルをトレーニングすることによって分布を学習する傾向があり、結果は主に主観的な方法で評価されます。ただし、この分野での研究は比較的少なく、認識タスクに画像合成手法を使用する可能性を研究しています。この論文では、データ拡張のための画像変換の問題を提案し、調査します。最初に、ソース テクスチャの単一の入力に基づいてテクスチャを変換して画像を拡張するための軽量で効率的なモデルを提案します。これにより、Single Image Texture Translation for data Augmentation (SITTA) と呼ばれる、高速なトレーニングとテストが可能になります。次に、ロングテールおよび少数ショットの画像分類タスクでの拡張データの使用について説明します。提案された拡張方法とワークフローは、入力データのテクスチャをターゲットドメインに変換できることがわかり、一貫して画像認識パフォーマンスが向上します。最後に、SITTA および関連する画像変換方法が、モデル トレーニングに対するデータ効率の高い「拡張エンジニアリング」アプローチの基礎をどのように提供できるかを調べます。コードは https://github.com/Boyiliee/SITTA で入手できます。
Recent advances in data augmentation enable one to translate images by learning the mapping between a source domain and a target domain. Existing methods tend to learn the distributions by training a model on a variety of datasets, with results evaluated largely in a subjective manner. Relatively few works in this area, however, study the potential use of image synthesis methods for recognition tasks. In this paper, we propose and explore the problem of image translation for data augmentation. We first propose a lightweight yet efficient model for translating texture to augment images based on a single input of source texture, allowing for fast training and testing, referred to as Single Image Texture Translation for data Augmentation (SITTA). Then we explore the use of augmented data in long-tailed and few-shot image classification tasks. We find the proposed augmentation method and workflow is capable of translating the texture of input data into a target domain, leading to consistently improved image recognition performance. Finally, we examine how SITTA and related image translation methods can provide a basis for a data-efficient, "augmentation engineering" approach to model training. Codes are available at https://github.com/Boyiliee/SITTA.