電力正規化(PN)は、分類問題における特徴の不均衡に取り組む有用な非線形演算子です。新しいPNレイヤープーリング特徴マップを介して、ディープラーニングのセットアップでPNを研究します。私たちのレイヤーは、CNNの最後の畳み込みレイヤーによって生成された特徴マップ内の特徴ベクトルとそれぞれの空間位置を、PN演算子が適用される2次統計量を持つ正定値行列に結合し、いわゆる2次プーリング(SOP)を形成します。 )。このホワイトペーパーの主な目的は電力の正規化を研究することであるため、2つの一般的なPN関数であるMaxExpとGammaの役割と意味を調査します。この目的のために、このような要素ごとの演算子の確率論的解釈を提供し、エンドツーエンドのトレーニングのための行儀の良い導関数を持つ代理を発見します。さらに、スペクトルパワー正規化(SPN)を研究することにより、MaxExpとガンマのスペクトル適用性を調べます。自己相関/共分散行列のSPNとグラフのラプラシアン行列の熱拡散プロセス(HDP)は密接に関連しており、その特性を共有していることを示します。このような発見は、共分散/自己相関行列のHDPの変形である高速スペクトルMaxExpである私たちの仕事の集大成につながります。きめ細かい認識、シーン認識、マテリアル分類、および数ショット学習とグラフ分類に関するアイデアを評価します。
Power Normalizations (PN) are useful non-linear operators which tackle feature imbalances in classification problems. We study PNs in the deep learning setup via a novel PN layer pooling feature maps. Our layer combines the feature vectors and their respective spatial locations in the feature maps produced by the last convolutional layer of CNN into a positive definite matrix with second-order statistics to which PN operators are applied, forming so-called Second-order Pooling (SOP). As the main goal of this paper is to study Power Normalizations, we investigate the role and meaning of MaxExp and Gamma, two popular PN functions. To this end, we provide probabilistic interpretations of such element-wise operators and discover surrogates with well-behaved derivatives for end-to-end training. Furthermore, we look at the spectral applicability of MaxExp and Gamma by studying Spectral Power Normalizations (SPN). We show that SPN on the autocorrelation/covariance matrix and the Heat Diffusion Process (HDP) on a graph Laplacian matrix are closely related, thus sharing their properties. Such a finding leads us to the culmination of our work, a fast spectral MaxExp which is a variant of HDP for covariances/autocorrelation matrices. We evaluate our ideas on fine-grained recognition, scene recognition, and material classification, as well as in few-shot learning and graph classification.