最近の研究では、大規模なGANのトレーニングを容易にする有望な方法として、プログレッシブネットワークの成長が導入されましたが、モデルの設計とアーキテクチャの成長戦略はまだ十分に検討されておらず、さまざまな画像データの手動設計が必要です。この論文では、トレーニング中にGANを動的に成長させ、ネットワークアーキテクチャとそのパラメータを自動化とともに最適化する方法を提案します。この方法は、勾配ベースのトレーニングを伴うインターリーブステップとしてアーキテクチャ検索技術を組み込み、ジェネレータとディスクリミネータに最適なアーキテクチャ成長戦略を定期的に探します。漸進的な成長によるトレーニングの緩和と、アーキテクチャ設計スペースの拡大によるパフォーマンスの向上の両方のメリットを享受できます。実験結果は、新しい最先端の画像生成を示しています。検索手順での観察は、ジェネレーターとディスクリミネーターのバランスや畳み込み層の選択など、GANモデルの設計に対する建設的な洞察も提供します。
Recent work introduced progressive network growing as a promising way to ease the training for large GANs, but the model design and architecture-growing strategy still remain under-explored and needs manual design for different image data. In this paper, we propose a method to dynamically grow a GAN during training, optimizing the network architecture and its parameters together with automation. The method embeds architecture search techniques as an interleaving step with gradient-based training to periodically seek the optimal architecture-growing strategy for the generator and discriminator. It enjoys the benefits of both eased training because of progressive growing and improved performance because of broader architecture design space. Experimental results demonstrate new state-of-the-art of image generation. Observations in the search procedure also provide constructive insights into the GAN model design such as generator-discriminator balance and convolutional layer choices.