arXiv reaDer
量子化グラフ畳み込みネットワークのためのハールウェーブレット特徴圧縮
Haar Wavelet Feature Compression for Quantized Graph Convolutional Networks
グラフ畳み込みネットワーク(GCN)は、さまざまなアプリケーションで広く使用されており、標準の畳み込みニューラルネットワーク(CNN)の非構造化バージョンと見なすことができます。 CNNの場合と同様に、大きな入力グラフ(大きな点群やメッシュなど)のGCNの計算コストは高く、特に計算リソースが少ない環境では、これらのネットワークの使用を妨げる可能性があります。これらのコストを軽減するために、量子化をGCNに適用できます。ただし、フィーチャマップを積極的に量子化すると、パフォーマンスが大幅に低下する可能性があります。別の注意点として、ハールウェーブレット変換は、信号を圧縮するための最も効果的かつ効率的なアプローチの1つであることが知られています。したがって、特徴マップに積極的な量子化を適用する代わりに、ハールウェーブレット圧縮と光量子化を利用して、ネットワークに関連する計算と帯域幅を削減することを提案します。このアプローチは、ノード分類から点群分類、パーツおよびセマンティックセグメンテーションに至るまでのさまざまな問題に対して、積極的な特徴量子化を大幅に上回っていることを示しています。
Graph Convolutional Networks (GCNs) are widely used in a variety of applications, and can be seen as an unstructured version of standard Convolutional Neural Networks (CNNs). As in CNNs, the computational cost of GCNs for large input graphs (such as large point clouds or meshes) can be high and inhibit the use of these networks, especially in environments with low computational resources. To ease these costs, quantization can be applied to GCNs. However, aggressive quantization of the feature maps can lead to a significant degradation in performance. On a different note, Haar wavelet transforms are known to be one of the most effective and efficient approaches to compress signals. Therefore, instead of applying aggressive quantization to feature maps, we propose to utilize Haar wavelet compression and light quantization to reduce the computations and the bandwidth involved with the network. We demonstrate that this approach surpasses aggressive feature quantization by a significant margin, for a variety of problems ranging from node classification to point cloud classification and part and semantic segmentation.
updated: Sun Oct 10 2021 15:25:37 GMT+0000 (UTC)
published: Sun Oct 10 2021 15:25:37 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト