arXiv reaDer
TCN と Transformer に基づく継続的な感情認識
Continuous emotion recognition based on TCN and Transformer
人間の感情認識は、人間とコンピューターの相互作用において重要な役割を果たします。このホワイト ペーパーでは、第 5 回ワークショップの Valence-Arousal (VA) 推定チャレンジ、Expression (Expr) Classification Challenge、および Action Unit (AU) Detection Challenge へのアプローチと、イン ザ ワイルドの感情行動分析に関するコンペティションを紹介します ( ABAW)。具体的には、Temporal Convolutional Networks (TCN) と Transformer を活用して連続的な感情認識のパフォーマンスを向上させる、新しいマルチモーダル フュージョン モデルを提案します。私たちのモデルは、視覚情報と聴覚情報を効果的に統合して、感情認識の精度を向上させることを目的としています。モデルは一致相関係数 (CCC) で評価されます。
Human emotion recognition plays an important role in human-computer interaction. In this paper, we present our approach to the Valence-Arousal (VA) Estimation Challenge, Expression (Expr) Classification Challenge, and Action Unit (AU) Detection Challenge of the 5th Workshop and Competition on Affective Behavior Analysis in-the-wild (ABAW). Specifically, we propose a novel multi-modal fusion model that leverages Temporal Convolutional Networks (TCN) and Transformer to enhance the performance of continuous emotion recognition. Our model aims to effectively integrate visual and audio information for improved accuracy in recognizing emotions. The model is evaluate with Concordance Correlation Coefficient (CCC)
updated: Wed Mar 15 2023 04:15:57 GMT+0000 (UTC)
published: Wed Mar 15 2023 04:15:57 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト