arXiv reaDer
PFGDF:ディープニューラルネットワークアクセラレーションのためのガウス分布機能を介したフィルターのプルーニング
PFGDF: Pruning Filter via Gaussian Distribution Feature for Deep Neural Networks Acceleration
畳み込みニューラルネットワークに多くの冗長な情報が存在すると、機器のエッジへの展開が遅くなります。この問題を解決するために、データ分布特性に基づく新しい深層学習モデルの圧縮加速方法、つまり、特定の層の畳み込み層の小さな間隔を見つけて元の層を説明するガウス分布機能(PFGDF)によるプルーニングフィルターを提案しました。分布特性による。以前の高度な方法と比較して、PFGDFは、たたみ込みフィルターの寄与および感度情報に関係なく、分布に重要性のないフィルターによってモデルを圧縮しました。モデルのプルーニングプロセスが自動化され、圧縮されたモデルが元のモデルのパフォーマンスを復元できることが常に保証されました。特に、CIFAR-10では、PFGDFはVGG-16の畳み込みフィルターを66:62%圧縮し、パラメーターは90%以上減少し、FLOPは70:27%を達成しました。 ResNet-32では、PFGDFは畳み込みフィルターを21:92%削減しました。パラメータが54:64%に減少し、FLOPが42%を超えた
The existence of a lot of redundant information in convolutional neural networks leads to the slow deployment of its equipment on the edge. To solve this issue, we proposed a novel deep learning model compression acceleration method based on data distribution characteristics, namely Pruning Filter via Gaussian Distribution Feature(PFGDF) which was to found the smaller interval of the convolution layer of a certain layer to describe the original on the grounds of distribution characteristics . Compared with revious advanced methods, PFGDF compressed the model by filters with insignificance in distribution regardless of the contribution and sensitivity information of the convolution filter. The pruning process of the model was automated, and always ensured that the compressed model could restore the performance of original model. Notably, on CIFAR-10, PFGDF compressed the convolution filter on VGG-16 by 66:62%, the parameter reducing more than 90%, and FLOPs achieved 70:27%. On ResNet-32, PFGDF reduced the convolution filter by 21:92%. The parameter was reduced to 54:64%, and the FLOPs exceeded 42%
updated: Sat May 14 2022 17:13:33 GMT+0000 (UTC)
published: Tue Jun 23 2020 13:03:21 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト