arXiv reaDer
Video2IMU:ビデオからのリアルなIMU機能と信号
Video2IMU: Realistic IMU features and signals from videos
ウェアラブルセンサーデータからの人間活動認識(HAR)は、制約のない環境での動きや活動を識別します。 HARは、被験者間で大きなばらつきがあるため、難しい問題です。ウェアラブルセンサー信号は、単純な人間の検査ではラベル付けが容易ではないため、大量のラベル付けされたデータを取得することは簡単ではありません。私たちの仕事では、人間の活動の単眼ビデオを使用して現実的な信号と特徴を生成するためのニューラルネットワークの使用を提案します。これらの生成された機能と信号を実際の対応物の代わりに利用して、ウェアラブルセンサーで取得した信号を使用してアクティビティを認識できるHARモデルをトレーニングする方法を示します。私たちの方法の妥当性を証明するために、私たちは産業作業の安全性を向上させるために作成された活動認識データセットで実験を行います。私たちのモデルが、実際のセンサーデータを使用してトレーニングされたものと同等のパフォーマンスでHAR分類器をトレーニングするために使用できる仮想センサー信号と機能を現実的に生成できることを示します。私たちの結果は、ウェアラブルセンサーからの信号を分類するためにHARモデルをトレーニングするために利用可能なラベル付きビデオデータの使用を可能にします。
Human Activity Recognition (HAR) from wearable sensor data identifies movements or activities in unconstrained environments. HAR is a challenging problem as it presents great variability across subjects. Obtaining large amounts of labelled data is not straightforward, since wearable sensor signals are not easy to label upon simple human inspection. In our work, we propose the use of neural networks for the generation of realistic signals and features using human activity monocular videos. We show how these generated features and signals can be utilized, instead of their real counterparts, to train HAR models that can recognize activities using signals obtained with wearable sensors. To prove the validity of our methods, we perform experiments on an activity recognition dataset created for the improvement of industrial work safety. We show that our model is able to realistically generate virtual sensor signals and features usable to train a HAR classifier with comparable performance as the one trained using real sensor data. Our results enable the use of available, labelled video data for training HAR models to classify signals from wearable sensors.
updated: Mon Feb 14 2022 08:37:26 GMT+0000 (UTC)
published: Mon Feb 14 2022 08:37:26 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト