arXiv reaDer
Variation-aware Binarized Memristive Networks
  ディープニューラルネットワーク(DNN)の重みをバイナリ状態に量子化すると、リソースを消費する乗算累積演算を単純な累積に置き換えることができます。このようなバイナリ化ニューラルネットワーク(BNN)は、リソースと電力の要件を大幅に削減します。さらに、メモリスタは、DNNで有望なシナプス重量要素として示されています。この論文では、ハイブリッドの重みとパラメータ表現を採用した、新しい二値化された記憶的畳み込みニューラルネットワーク(BMCNN)アーキテクチャを提案し、シミュレーションします。提案されたアーキテクチャをオフラインでトレーニングし、その後、トレーニング用のパラメータを2値化されたメムリスティブデバイスにマップして推論します。メムリスティブデバイスの変動を考慮し、パフォーマンスへの影響を調べるために、$ R_ {ON $および$ R_ {OFF $の変動を導入します。さらに、提案されているネットワークのメムリスティブ変動の悪影響を軽減する手段を導入します。最後に、MNISTデータセットを使用して、BMCNNとバリエーション対応BMCNNのベンチマークを行います。
The quantization of weights to binary states in Deep Neural Networks (DNNs) can replace resource-hungry multiply accumulate operations with simple accumulations. Such Binarized Neural Networks (BNNs) exhibit greatly reduced resource and power requirements. In addition, memristors have been shown as promising synaptic weight elements in DNNs. In this paper, we propose and simulate novel Binarized Memristive Convolutional Neural Network (BMCNN) architectures employing hybrid weight and parameter representations. We train the proposed architectures offline and then map the trained parameters to our binarized memristive devices for inference. To take into account the variations in memristive devices, and to study their effect on the performance, we introduce variations in $R_{ON$ and $R_{OFF$. Moreover, we introduce means to mitigate the adverse effect of memristive variations in our proposed networks. Finally, we benchmark our BMCNNs and variation-aware BMCNNs using the MNIST dataset.
updated: Mon Oct 14 2019 05:46:12 GMT+0000 (UTC)
published: Mon Oct 14 2019 05:46:12 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト