自動化された影響モデリングシステムを効率的に構築および監視するには、視覚的影響データ(顔画像など)の定量化が不可欠です。これを考慮して、この作品は、人間の顔の表現力を定量化するために、定量化された顔の時間的表現力ダイナミクス(TED)を提案します。提案されたアルゴリズムは、静的および動的な情報を組み込むことによってマルチモーダルな顔の特徴を活用して、顔の表現力の正確な測定を可能にします。 TEDは、非構造化視覚データの要約、自動化された影響認識モデルからの期待と解釈などの高レベルのタスクに使用できることを示します。 TEDを使用することのプラスの影響を評価するために、UNBC-McMasterの自発的な肩の痛みのデータセットを使用して自発的な痛みに関するケーススタディを実施しました。実験結果は、定量化された感情分析にTEDを使用することの有効性を示しています。
The quantification of visual affect data (e.g. face images) is essential to build and monitor automated affect modeling systems efficiently. Considering this, this work proposes quantified facial Temporal-expressiveness Dynamics (TED) to quantify the expressiveness of human faces. The proposed algorithm leverages multimodal facial features by incorporating static and dynamic information to enable accurate measurements of facial expressiveness. We show that TED can be used for high-level tasks such as summarization of unstructured visual data, and expectation from and interpretation of automated affect recognition models. To evaluate the positive impact of using TED, a case study was conducted on spontaneous pain using the UNBC-McMaster spontaneous shoulder pain dataset. Experimental results show the efficacy of using TED for quantified affect analysis.