このホワイトペーパーでは、AFFDEX 2.0を紹介します。これは、野生の顔の表情を分析するためのツールキットです。 a)3D頭のポーズを推定し、b)顔のアクションユニット(AU)を検出し、c)基本的な感情と2つの新しい感情状態(感情と混乱)を認識し、d)瞬きや注意などの高レベルの表現指標を検出します。 AFFDEX 2.0モデルは主にディープラーニングに基づいており、さまざまな人口統計グループからの数千人の参加者で構成される大規模な自然主義的データセットを使用してトレーニングされています。 AFFDEX 2.0は、以前のツールキット[1]の拡張バージョンであり、より困難な状況で顔を効率的に追跡し、より正確に顔の表情を検出し、新しい感情状態(感情と混乱)を認識することができます。 AFFDEX 2.0は、複数の面をリアルタイムで処理でき、WindowsおよびLinuxプラットフォーム全体で機能します。
In this paper we introduce AFFDEX 2.0 - a toolkit for analyzing facial expressions in the wild, that is, it is intended for users aiming to; a) estimate the 3D head pose, b) detect facial Action Units (AUs), c) recognize basic emotions and 2 new emotional states (sentimentality and confusion), and d) detect high-level expressive metrics like blink and attention. AFFDEX 2.0 models are mainly based on Deep Learning, and are trained using a large-scale naturalistic dataset consisting of thousands of participants from different demographic groups. AFFDEX 2.0 is an enhanced version of our previous toolkit [1], that is capable of tracking efficiently faces at more challenging conditions, detecting more accurately facial expressions, and recognizing new emotional states (sentimentality and confusion). AFFDEX 2.0 can process multiple faces in real time, and is working across the Windows and Linux platforms.