arXiv reaDer
損失変化率のバランスをとる加速されたWGAN更新戦略
Accelerated WGAN update strategy with loss change rate balancing
生成的敵対的ネットワーク(GAN)の弁別子を最適化して、内部トレーニングループで完了することは、計算上禁止されており、有限のデータセットでは過剰適合になります。これに対処するための一般的な更新戦略は、ディスクリミネーターDのk個の最適化ステップとジェネレーターGの1個の最適化ステップを交互に行うことです。この戦略は、kが経験的に選択されるさまざまなGANアルゴリズムで繰り返されます。この論文では、この更新戦略が精度と収束速度の点で最適ではないことを示し、Wasserstein GAN(WGAN)およびWGAN損失を使用する他のGAN(WGAN-GP、Deblur GAN、および超解像GAN)。提案された更新戦略は、GとDの損失変化率の比較に基づいています。提案された戦略が収束速度と精度の両方を改善することを示します。
Optimizing the discriminator in Generative Adversarial Networks (GANs) to completion in the inner training loop is computationally prohibitive, and on finite datasets would result in overfitting. To address this, a common update strategy is to alternate between k optimization steps for the discriminator D and one optimization step for the generator G. This strategy is repeated in various GAN algorithms where k is selected empirically. In this paper, we show that this update strategy is not optimal in terms of accuracy and convergence speed, and propose a new update strategy for Wasserstein GANs (WGAN) and other GANs using the WGAN loss(e.g. WGAN-GP, Deblur GAN, and Super-resolution GAN). The proposed update strategy is based on a loss change ratio comparison of G and D. We demonstrate that the proposed strategy improves both convergence speed and accuracy.
updated: Tue Nov 03 2020 01:45:11 GMT+0000 (UTC)
published: Fri Aug 28 2020 03:29:09 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト