arXiv reaDer
周波数プーリング:シフト等価およびアンチエイリアシングダウンサンプリング
Frequency Pooling: Shift-Equivalent and Anti-Aliasing Downsampling
畳み込みは、シフトに相当する画像の事前分布を利用するため、画像処理タスクで大きな成功を収めます。ただし、max-pooling、average-pooling、strided-convolutionなどの畳み込みニューラルネットワーク(CNN)で一般的に使用されるプーリングは、シフトと同等ではありません。したがって、畳み込みとプーリングがスタックされると、CNNのシフト等価性が破壊されます。さらに、アンチエイリアシングは、信号処理の観点から、プーリングのもう1つの重要な特性です。ただし、最近のプーリングはシフトと同等でもアンチエイリアシングでもありません。この問題に対処するために、周波数プーリングと呼ばれる、シフト等価でアンチエイリアシングである新しいプーリング方法を提案します。周波数プーリングは、最初に特徴を周波数領域に変換し、次にナイキスト周波数を超える周波数成分を削除します。最後に、フィーチャを空間ドメインに変換し直します。フーリエ変換とナイキスト周波数の特性に基づいて、周波数プーリングがシフト等価でアンチエイリアシングであることを証明します。画像分類に関する実験は、周波数プーリングがCNNのシフトに関して精度とロバスト性を改善することを示しています。
Convolution utilizes a shift-equivalent prior of images, thus leading to great success in image processing tasks. However, commonly used poolings in convolutional neural networks (CNNs), such as max-pooling, average-pooling, and strided-convolution, are not shift-equivalent. Thus, the shift-equivalence of CNNs is destroyed when convolutions and poolings are stacked. Moreover, anti-aliasing is another essential property of poolings from the perspective of signal processing. However, recent poolings are neither shift-equivalent nor anti-aliasing. To address this issue, we propose a new pooling method that is shift-equivalent and anti-aliasing, named frequency pooling. Frequency pooling first transforms the features into the frequency domain, and then removes the frequency components beyond the Nyquist frequency. Finally, it transforms the features back to the spatial domain. We prove that frequency pooling is shift-equivalent and anti-aliasing based on the property of Fourier transform and Nyquist frequency. Experiments on image classification show that frequency pooling improves accuracy and robustness with respect to the shifts of CNNs.
updated: Fri Sep 24 2021 09:32:10 GMT+0000 (UTC)
published: Fri Sep 24 2021 09:32:10 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト