arXiv reaDer
GANの適応的コンセンサス最適化法
Adaptive Consensus Optimization Method for GANs
敵対的生成ネットワークのトレーニングのために、ADAM と RMSprop を使用した 2 次勾配ベースの方法を提案します。提案された方法は、著名な二次方法と比較した場合、同様の精度を得るために最速です。最先端の最近の方法とは異なり、線形システムを解く必要がなく、追加の混合二次導関数項も必要ありません。提案手法に対応する不動点反復を導出し、提案手法が収束することを示す。提案された方法は、他の最近提案された最先端の二次方法と比較して、より良いまたは同等の開始スコア、および同等の品質の画像を生成します。 ADAM などの 1 次方式と比較して、大幅に優れた開始スコアが得られます。提案された方法は、FFHQ、LSUN、CIFAR10、MNIST、ファッション MNIST などの画像生成タスクの一般的なデータセットで比較および検証され、IJCNN 2023 で承認されました。コード: https://github.com/misterpawan/acom
We propose a second order gradient based method with ADAM and RMSprop for the training of generative adversarial networks. The proposed method is fastest to obtain similar accuracy when compared to prominent second order methods. Unlike state-of-the-art recent methods, it does not require solving a linear system, or it does not require additional mixed second derivative terms. We derive the fixed point iteration corresponding to proposed method, and show that the proposed method is convergent. The proposed method produces better or comparable inception scores, and comparable quality of images compared to other recently proposed state-of-the-art second order methods. Compared to first order methods such as ADAM, it produces significantly better inception scores. The proposed method is compared and validated on popular datasets such as FFHQ, LSUN, CIFAR10, MNIST, and Fashion MNIST for image generation tasksAccepted in IJCNN 2023. Codes: https://github.com/misterpawan/acom
updated: Thu Apr 20 2023 13:50:42 GMT+0000 (UTC)
published: Thu Apr 20 2023 13:50:42 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト