arXiv reaDer
Identifying Emotions from Walking using Affective and Deep Features
 歩行スタイルに基づいて個人の知覚感情を識別する新しいデータ駆動型モデルとアルゴリズムを提示します。個々の歩行のRGBビデオを考えると、一連の3Dポーズの形で彼/彼女の歩行歩容を抽出します。私たちの目標は、歩行機能を活用して、人間の感情状態を4つの感情(幸せ、悲しい、怒り、または中立)のいずれかに分類することです。私たちの知覚感情認識アプローチは、ラベル付き感情データセットでLSTMを介して学習した深い機能を使用します。さらに、これらの機能を、姿勢と動きのキューを使用して歩行から計算された感情的な機能と組み合わせます。これらの機能は、ランダムフォレスト分類子を使用して分類されます。結合された特徴空間と知覚された感情状態との間のマッピングは、知覚された感情を識別する際に80.07%の精度を提供することを示します。感情の離散カテゴリを分類することに加えて、我々のアルゴリズムは、知覚された価と歩行からの覚醒の値も予測します。また、歩行およびラベル付けされた感情を持つ歩行者のビデオで構成されるEWalk(Emotion Walk)データセットも提示します。私たちの知る限り、これは歩行者のビデオから知覚された感情を識別する最初の歩行ベースのモデルです。
We present a new data-driven model and algorithm to identify the perceived emotions of individuals based on their walking styles. Given an RGB video of an individual walking, we extract his/her walking gait in the form of a series of 3D poses. Our goal is to exploit the gait features to classify the emotional state of the human into one of four emotions: happy, sad, angry, or neutral. Our perceived emotion recognition approach uses deep features learned via LSTM on labeled emotion datasets. Furthermore, we combine these features with affective features computed from gaits using posture and movement cues. These features are classified using a Random Forest Classifier. We show that our mapping between the combined feature space and the perceived emotional state provides 80.07% accuracy in identifying the perceived emotions. In addition to classifying discrete categories of emotions, our algorithm also predicts the values of perceived valence and arousal from gaits. We also present an EWalk (Emotion Walk) dataset that consists of videos of walking individuals with gaits and labeled emotions. To the best of our knowledge, this is the first gait-based model to identify perceived emotions from videos of walking individuals.
updated: Thu Jan 09 2020 21:06:50 GMT+0000 (UTC)
published: Fri Jun 14 2019 11:41:37 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト