arXiv reaDer
骨格データからのリアルタイム 3D 人間行動認識のための深層学習アプローチ
A Deep Learning Approach for Real-Time 3D Human Action Recognition from Skeletal Data
骨格データからのリアルタイム 3D 人間行動認識のための新しい深層学習アプローチを提示し、それを適用して視覚ベースのインテリジェント監視システムを開発します。スケルトン シーケンスが与えられた場合、スケルトンのポーズとその動きを単一の RGB 画像にエンコードすることを提案します。次に、適応ヒストグラム均等化 (AHE) アルゴリズムをカラー画像に適用して、局所的なパターンを強化し、より識別可能な特徴を生成します。学習と分類のタスクでは、Densely Connected Convolutional Architecture (DenseNet) に基づいてディープ ニューラル ネットワークを設計し、強化されたカラー画像から特徴を抽出してクラスに分類します。 2 つの挑戦的なデータセットに関する実験結果は、提案された方法が最先端の精度に達し、トレーニングと推論に必要な計算時間が短いことを示しています。このペーパーでは、公共交通機関での乗客の行動を表す新しい RGB-D データセットである CEMEST も紹介します。これは、現実的な正常および異常なイベントのトリミングされていない 203 の実世界の監視ビデオで構成されています。データ拡張と転移学習技術のサポートにより、このデータセットの実際の条件で有望な結果を達成します。これにより、公共交通機関の監視とセキュリティを強化するための深層学習に基づく実世界のアプリケーションの構築が可能になります。
We present a new deep learning approach for real-time 3D human action recognition from skeletal data and apply it to develop a vision-based intelligent surveillance system. Given a skeleton sequence, we propose to encode skeleton poses and their motions into a single RGB image. An Adaptive Histogram Equalization (AHE) algorithm is then applied on the color images to enhance their local patterns and generate more discriminative features. For learning and classification tasks, we design Deep Neural Networks based on the Densely Connected Convolutional Architecture (DenseNet) to extract features from enhanced-color images and classify them into classes. Experimental results on two challenging datasets show that the proposed method reaches state-of-the-art accuracy, whilst requiring low computational time for training and inference. This paper also introduces CEMEST, a new RGB-D dataset depicting passenger behaviors in public transport. It consists of 203 untrimmed real-world surveillance videos of realistic normal and anomalous events. We achieve promising results on real conditions of this dataset with the support of data augmentation and transfer learning techniques. This enables the construction of real-world applications based on deep learning for enhancing monitoring and security in public transport.
updated: Wed Aug 10 2022 04:43:35 GMT+0000 (UTC)
published: Mon Jul 08 2019 11:22:41 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト