arXiv reaDer
PFGDF:ディープニューラルネットワークアクセラレーション用のガウス分布機能によるプルーニングフィルター
PFGDF: Pruning Filter via Gaussian Distribution Feature for Deep Neural Networks Acceleration
ディープラーニングは多くの分野で印象的な結果を達成していますが、エッジインテリジェントデバイスの展開はまだ非常に遅いです。この問題を解決するために、ディープニューラルネットワークのデータ分散特性に基づく新しい圧縮および加速方法、つまりガウス分布特徴(PFGDF)による剪定フィルターを提案します。以前の高度な剪定方法と比較して、PFGDFは、畳み込みフィルターの寄与と感度の情報に関係なく、分布が重要でないフィルターによってモデルを圧縮します。 PFGDFは、スパースウェイトマトリックスを処理するために特別な高速化ライブラリを必要とせず、追加のパラメーターを導入しないため、ウェイトスパース化プルーニングとは大きく異なります。 PFGDFのプルーニングプロセスは自動化されています。さらに、PFGDFによって圧縮されたモデルは、非圧縮モデルと同じパフォーマンスを復元できます。広範な実験を通じてPFGDFを評価します。CIFAR-10では、PFGDFはVGG-16の畳み込みフィルターを66.62%圧縮し、パラメーターを90%以上削減し、Huawei MATE 10では推論時間が83.73%加速します。
Deep learning has achieved impressive results in many areas, but the deployment of edge intelligent devices is still very slow. To solve this problem, we propose a novel compression and acceleration method based on data distribution characteristics for deep neural networks, namely Pruning Filter via Gaussian Distribution Feature (PFGDF). Compared with previous advanced pruning methods, PFGDF compresses the model by filters with insignificance in distribution, regardless of the contribution and sensitivity information of the convolution filter. PFGDF is significantly different from weight sparsification pruning because it does not require the special accelerated library to process the sparse weight matrix and introduces no more extra parameters. The pruning process of PFGDF is automated. Furthermore, the model compressed by PFGDF can restore the same performance as the uncompressed model. We evaluate PFGDF through extensive experiments, on CIFAR-10, PFGDF compresses the convolution filter on VGG-16 by 66.62% with more than 90% parameter reduced, while the inference time is accelerated by 83.73% on Huawei MATE 10.
updated: Thu May 26 2022 15:48:58 GMT+0000 (UTC)
published: Tue Jun 23 2020 13:03:21 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト