arXiv reaDer
Faster AutoAugment: Learning Augmentation Strategies using Backpropagation
 データ増強方法は、特に画像認識タスクでディープニューラルネットワークのパフォーマンスを向上させるために不可欠なヒューリスティックです。最近、いくつかの研究により、検索アルゴリズムで見つかった拡張戦略が手作りの戦略よりも優れていることが示されています。このような方法では、連続または離散パラメーターを使用した画像変換に対してブラックボックス検索アルゴリズムを使用し、より良い戦略を得るために長い時間が必要です。このホワイトペーパーでは、以前の方法よりもはるかに高速な、データ増大のための微分可能なポリシー検索パイプラインを提案します。離散パラメーターを使用したいくつかの変換操作の近似勾配と、操作を選択するための微分可能なメカニズムを導入します。トレーニングの目的として、増強されたデータと元のデータの分布間の距離を最小化します。私たちの方法であるFaster AutoAugmentは、パフォーマンスを低下させることなく、以前の作業よりも大幅に高速な検索を実現することを示しています。
Data augmentation methods are indispensable heuristics to boost the performance of deep neural networks, especially in image recognition tasks. Recently, several studies have shown that augmentation strategies found by search algorithms outperform hand-made strategies. Such methods employ black-box search algorithms over image transformations with continuous or discrete parameters and require a long time to obtain better strategies. In this paper, we propose a differentiable policy search pipeline for data augmentation, which is much faster than previous methods. We introduce approximate gradients for several transformation operations with discrete parameters as well as the differentiable mechanism for selecting operations. As the objective of training, we minimize the distance between the distributions of augmented data and the original data, which can be differentiated. We show that our method, Faster AutoAugment, achieves significantly faster searching than prior work without a performance drop.
updated: Sat Nov 16 2019 08:10:59 GMT+0000 (UTC)
published: Sat Nov 16 2019 08:10:59 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト