生成的敵対的ネットワーク(GAN)の弁別子を最適化して、内部トレーニングループで完了することは、計算上禁止されており、有限のデータセットでは過剰適合になります。これに対処するための一般的な更新戦略は、ディスクリミネーターDのk個の最適化ステップとジェネレーターGの1個の最適化ステップを交互に行うことです。この戦略は、kが経験的に選択されるさまざまなGANアルゴリズムで繰り返されます。この論文では、この更新戦略が精度と収束速度の点で最適ではないことを示し、Wasserstein GAN(WGAN)およびWGAN損失を使用する他のGAN(WGAN-GP、Deblur GAN、および超解像GAN)。提案された更新戦略は、GとDの損失変化率の比較に基づいています。提案された戦略が収束速度と精度の両方を改善することを示します。
Optimizing the discriminator in Generative Adversarial Networks (GANs) to completion in the inner training loop is computationally prohibitive, and on finite datasets would result in overfitting. To address this, a common update strategy is to alternate between k optimization steps for the discriminator D and one optimization step for the generator G. This strategy is repeated in various GAN algorithms where k is selected empirically. In this paper, we show that this update strategy is not optimal in terms of accuracy and convergence speed, and propose a new update strategy for Wasserstein GANs (WGAN) and other GANs using the WGAN loss(e.g. WGAN-GP, Deblur GAN, and Super-resolution GAN). The proposed update strategy is based on a loss change ratio comparison of G and D. We demonstrate that the proposed strategy improves both convergence speed and accuracy.