U-net、生成的敵対的ネットワーク、または事前の深い画像などの畳み込みニューラルネットワークによって生成された画像の規則性が分析されます。解像度に依存しない無限の次元の設定では、関数として表されるそのような画像は常に連続的であり、状況によっては連続的に微分可能でさえあり、ジャンプの不連続性を介した画像の鋭いエッジの広く受け入れられているモデリングと矛盾することが示されています。このようなステートメントには無限の次元設定が必要ですが、実際に使用される(離散化された)ニューラルネットワークへの接続は、解像度が無限に近づくにつれて限界を考慮することによって行われます。実際の結果として、この論文の結果は、画像がネットワーク出力である場合、ネットワークの重みの基本的なL2正則化を控えることを示唆しています。
The regularity of images generated by convolutional neural networks, such as the U-net, generative adversarial networks, or the deep image prior, is analyzed. In a resolution-independent, infinite dimensional setting, it is shown that such images, represented as functions, are always continuous and, in some circumstances, even continuously differentiable, contradicting the widely accepted modeling of sharp edges in images via jump discontinuities. While such statements require an infinite dimensional setting, the connection to (discretized) neural networks used in practice is made by considering the limit as the resolution approaches infinity. As practical consequence, the results of this paper suggest to refrain from basic L2 regularization of network weights in case of images being the network output.