arXiv reaDer
Layer-wise training convolutional neural networks with smaller filters for human activity recognition using wearable sensors
最近、畳み込みニューラルネットワーク(CNN)は、さまざまな人間活動認識(HAR)データセットに最新の最先端技術を導入しました。ただし、ディープCNNは多くの場合、より多くのコンピューティングリソースを必要とし、組み込みHARでのアプリケーションを制限します。 CNNのメモリとFLOPを削減するための多くの成功した方法が提案されていますが、それらには視覚的タスク用に設計された特別なネットワークアーキテクチャが含まれることが多く、時系列センサー信号を伴う深いHARタスクには顕著な差異があるため適切ではありません。したがって、HARを実行するには、軽量のディープモデルを開発する必要があります。フィルターはCNNを構築する上での基本単位であるため、より小さなフィルターの再設計がディープHARに適用可能かどうかをさらに調査する価値があります。このアイデアに触発された論文では、HARにレゴフィルターを使用した軽量CNNを提案しました。一連の低次元フィルターは、特別なネットワーク構造に依存しない従来のフィルター用に積み重ねられるレゴブロックとして使用されます。ローカル損失関数は、モデルのトレーニングに使用されます。私たちの知る限り、これはユビキタスウェアラブルコンピューティング分野におけるHARの軽量CNNを提案する最初の論文です。 5つのパブリックHARデータセット、UCI-HARデータセット、OPPORTUNITYデータセット、UNIMIB-SHARデータセット、PAMAP2データセット、およびスマートフォンまたは複数のセンサーノードから収集されたWISDMデータセットの実験結果は、ローカル損失のある新しいレゴCNNがメモリを大幅に削減できることを示していますより高い精度を達成しながら、CNNを超える計算コスト。つまり、提案されたモデルはより小さく、より速く、より正確です。最後に、Androidスマートフォンでの実際のパフォーマンスを評価します。
Recently, convolutional neural networks (CNNs) have set latest state-of-the-art on various human activity recognition (HAR) datasets. However, deep CNNs often require more computing resources, which limits their applications in embedded HAR. Although many successful methods have been proposed to reduce memory and FLOPs of CNNs, they often involve special network architectures designed for visual tasks, which are not suitable for deep HAR tasks with time series sensor signals, due to remarkable discrepancy. Therefore, it is necessary to develop lightweight deep models to perform HAR. As filter is the basic unit in constructing CNNs, it deserves further research whether re-designing smaller filters is applicable for deep HAR. In the paper, inspired by the idea, we proposed a lightweight CNN using Lego filters for HAR. A set of lower-dimensional filters is used as Lego bricks to be stacked for conventional filters, which does not rely on any special network structure. The local loss function is used to train model. To our knowledge, this is the first paper that proposes lightweight CNN for HAR in ubiquitous and wearable computing arena. The experiment results on five public HAR datasets, UCI-HAR dataset, OPPORTUNITY dataset, UNIMIB-SHAR dataset, PAMAP2 dataset, and WISDM dataset collected from either smartphones or multiple sensor nodes, indicate that our novel Lego CNN with local loss can greatly reduce memory and computation cost over CNN, while achieving higher accuracy. That is to say, the proposed model is smaller, faster and more accurate. Finally, we evaluate the actual performance on an Android smartphone.
updated: Thu Aug 05 2021 04:40:00 GMT+0000 (UTC)
published: Fri May 08 2020 10:30:03 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト