arXiv reaDer
時空間グラフ畳み込みネットワークのスケルトン分割戦略
Skeleton Split Strategies for Spatial Temporal Graph Convolution Networks
人体の骨格表現は、このタスクに効果的であることが証明されています。スケルトンはグラフ形式で表示されます。ただし、グラフのトポロジは、ユークリッドベースのデータのように構造化されていません。したがって、スケルトングラフに対して畳み込み演算を実行するための新しいメソッドのセットが提示されます。私たちの提案は、Yanらによって提案されたST-GCNフレームワークに基づいています。 [1]。この研究では、ST-GCNフレームワークのラベルマッピング方法の改善されたセットを提示します。畳み込み演算の代替アプローチとして、3つの分割プロセス(全距離分割、接続分割、およびインデックス分割)を紹介します。パフォーマンスを評価するために、この研究で提示された実験は、NTU-RGB + DとKineticsの2つのベンチマークデータセットを使用してトレーニングされています。私たちの結果は、すべての分割プロセスが以前のパーティション戦略よりも優れており、追加のトレーニングパラメータに重みを付けるエッジ重要度を使用せずにトレーニング中により安定していることを示しています。したがって、私たちの提案は、屋内環境の日常生活動作認識システム活動を中心としたリアルタイムアプリケーションのためのより現実的なソリューションを提供することができます。
A skeleton representation of the human body has been proven to be effective for this task. The skeletons are presented in graphs form-like. However, the topology of a graph is not structured like Euclidean-based data. Therefore, a new set of methods to perform the convolution operation upon the skeleton graph is presented. Our proposal is based upon the ST-GCN framework proposed by Yan et al. [1]. In this study, we present an improved set of label mapping methods for the ST-GCN framework. We introduce three split processes (full distance split, connection split, and index split) as an alternative approach for the convolution operation. To evaluate the performance, the experiments presented in this study have been trained using two benchmark datasets: NTU-RGB+D and Kinetics. Our results indicate that all of our split processes outperform the previous partition strategies and are more stable during training without using the edge importance weighting additional training parameter. Therefore, our proposal can provide a more realistic solution for real-time applications centred on daily living recognition systems activities for indoor environments.
updated: Tue Aug 03 2021 05:57:52 GMT+0000 (UTC)
published: Tue Aug 03 2021 05:57:52 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト