本稿では、コモディティWiFiを使用した初の3D移動人間姿勢推定システムであるWi-Moseを紹介します。以前のWiFiベースの作品は、2Dおよび3Dポーズ推定を実現しました。これらのソリューションは、1つの視点からポーズをキャプチャするか、定点にいる人々のポーズを構築して、日常のシナリオで広く採用されるのを防ぎます。固定点ではなく空間全体を移動する人々の3Dポーズを再構築するために、振幅と位相を、ポーズと位置の両方の情報を提供できるチャネル状態情報(CSI)画像に融合します。さらに、CSI画像からポーズにのみ関連付けられている特徴を抽出し、その特徴をキーポイント座標に変換するニューラルネットワークを設計します。実験結果は、Wi-Moseが見通し内(LoS)および見通し外(NLoS)シナリオでそれぞれ29.7mmおよび37.8mmのプロクラステス分析平均関節位置誤差(P-MPJPE)を使用してキーポイントを特定できることを示しています。 、最先端の方法よりも高いパフォーマンスを実現します。結果は、Wi-Moseが空間全体で高精度の3D人間のポーズをキャプチャできることを示しています。
In this paper, we present Wi-Mose, the first 3D moving human pose estimation system using commodity WiFi. Previous WiFi-based works have achieved 2D and 3D pose estimation. These solutions either capture poses from one perspective or construct poses of people who are at a fixed point, preventing their wide adoption in daily scenarios. To reconstruct 3D poses of people who move throughout the space rather than a fixed point, we fuse the amplitude and phase into Channel State Information (CSI) images which can provide both pose and position information. Besides, we design a neural network to extract features that are only associated with poses from CSI images and then convert the features into key-point coordinates. Experimental results show that Wi-Mose can localize key-point with 29.7mm and 37.8mm Procrustes analysis Mean Per Joint Position Error (P-MPJPE) in the Line of Sight (LoS) and Non-Line of Sight (NLoS) scenarios, respectively, achieving higher performance than the state-of-the-art method. The results indicate that Wi-Mose can capture high-precision 3D human poses throughout the space.