arXiv reaDer
WiFiベースの時空間人間行動知覚
WiFi-based Spatiotemporal Human Action Perception
人間の活動認識(HAR)用のWiFiベースのセンシングは、見通し内(LOS)の要求を排除し、プライバシーを保護するなど、ビデオベースのHARと比較して大きなメリットをもたらすため、最近注目を集めています。ただし、WiFi信号を作成してアクションを「確認」することは非常に粗く、したがってまだ初期段階です。見通し内シナリオと見通し外シナリオの両方でWiFiのみのセンシングを可能にするために、エンドツーエンドの時空間WiFi信号ニューラルネットワーク(STWNN)が提案されています。特に、3D畳み込みモジュールはWiFi信号の時空間連続性を調査でき、機能自己注意モジュールは主要な機能を明示的に維持できます。さらに、WiFi信号の新しい3D表現は、マルチスケールの時空間情報を保持するように設計されています。さらに、小さなワイヤレスビジョンデータセット(WVAR)が同期的に収集され、STWNNの可能性をオクルージョンを通して「見る」ように拡張します。 WVARおよび他の3つの公開ベンチマークデータセットの定量的および定性的な結果は、精度とシフトの一貫性の両方に対するアプローチの有効性を示しています。
WiFi-based sensing for human activity recognition (HAR) has recently become a hot topic as it brings great benefits when compared with video-based HAR, such as eliminating the demands of line-of-sight (LOS) and preserving privacy. Making the WiFi signals to 'see' the action, however, is quite coarse and thus still in its infancy. An end-to-end spatiotemporal WiFi signal neural network (STWNN) is proposed to enable WiFi-only sensing in both line-of-sight and non-line-of-sight scenarios. Especially, the 3D convolution module is able to explore the spatiotemporal continuity of WiFi signals, and the feature self-attention module can explicitly maintain dominant features. In addition, a novel 3D representation for WiFi signals is designed to preserve multi-scale spatiotemporal information. Furthermore, a small wireless-vision dataset (WVAR) is synchronously collected to extend the potential of STWNN to 'see' through occlusions. Quantitative and qualitative results on WVAR and the other three public benchmark datasets demonstrate the effectiveness of our approach on both accuracy and shift consistency.
updated: Mon Jun 20 2022 16:03:45 GMT+0000 (UTC)
published: Mon Jun 20 2022 16:03:45 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト