ジェスチャ認識は、最も直感的な対話方法の1つであり、人間とコンピューターの対話で特に注目を集めています。レーダーセンサーは、低照度、過酷な気象条件で動作する能力、低コストでコンパクトであるなど、複数の固有の特性を備えているため、ジェスチャ認識ソリューションに非常に適しています。ただし、ほとんどの文献の作業は、1メートル未満の限られた範囲のソリューションに焦点を当てています。カメラポイントクラウドから60GHzFMCWレーダーポイントクラウドへのポイントクラウドベースのクロスラーニングアプローチを活用する、長距離(1m〜2m)ジェスチャ認識ソリューションの新しいアーキテクチャを提案します。これにより、ノイズを抑えながらより良い表現を学習できます。 。相互学習にはDynamicGraphCNN(DGCNN)のバリアントを使用し、ローカルレベルとグローバルレベルでポイント間の関係をモデル化し、Bi-LSTMネットワークが採用されている時間的ダイナミクスをモデル化できるようにします。実験結果のセクションでは、5つのジェスチャとその一般化機能に対してモデルの全体的な精度が98.4%であることを示しています。
Gesture recognition is one of the most intuitive ways of interaction and has gathered particular attention for human computer interaction. Radar sensors possess multiple intrinsic properties, such as their ability to work in low illumination, harsh weather conditions, and being low-cost and compact, making them highly preferable for a gesture recognition solution. However, most literature work focuses on solutions with a limited range that is lower than a meter. We propose a novel architecture for a long-range (1m - 2m) gesture recognition solution that leverages a point cloud-based cross-learning approach from camera point cloud to 60-GHz FMCW radar point cloud, which allows learning better representations while suppressing noise. We use a variant of Dynamic Graph CNN (DGCNN) for the cross-learning, enabling us to model relationships between the points at a local and global level and to model the temporal dynamics a Bi-LSTM network is employed. In the experimental results section, we demonstrate our model's overall accuracy of 98.4% for five gestures and its generalization capability.