生成的敵対的ネットワーク(GAN)の進歩には、実際の画像と視覚的に区別できない現実的な画像を生成する機能があります。ただし、画像スペクトルの最近の研究では、生成された画像と実際の画像が高周波で大きな違いを共有することが示されています。さらに、人間の目には見えない高周波成分がCNNの決定に影響を与え、その堅牢性に関連しています。同様に、弁別器が高周波の違いに敏感であるかどうか、したがって発電機の低周波成分への適合能力を低下させるかどうかは未解決の問題です。この論文では、GANの弁別器が、人間が区別できないような高周波の違いに敏感であり、画像の高周波成分がGANのトレーニングに役立たないことを示します。これらに基づいて、GANトレーニングの高周波の違いを排除する2つの前処理方法を提案します。高周波混同(HFC)と高周波フィルター(HFF)です。提案された方法は一般的であり、わずかなコストでほとんどの既存のGANフレームワークに簡単に適用できます。提案された方法の高度なパフォーマンスは、複数の損失関数、ネットワークアーキテクチャ、およびデータセットで検証されます。
Advancements in Generative Adversarial Networks (GANs) have the ability to generate realistic images that are visually indistinguishable from real images. However, recent studies of the image spectrum have demonstrated that generated and real images share significant differences at high frequency. Furthermore, the high-frequency components invisible to human eyes affect the decision of CNNs and are related to the robustness of it. Similarly, whether the discriminator will be sensitive to the high-frequency differences, thus reducing the fitting ability of the generator to the low-frequency components is an open problem. In this paper, we demonstrate that the discriminator in GANs is sensitive to such high-frequency differences that can not be distinguished by humans and the high-frequency components of images are not conducive to the training of GANs. Based on these, we propose two preprocessing methods eliminating high-frequency differences in GANs training: High-Frequency Confusion (HFC) and High-Frequency Filter (HFF). The proposed methods are general and can be easily applied to most existing GANs frameworks with a fraction of the cost. The advanced performance of the proposed method is verified on multiple loss functions, network architectures, and datasets.