特に現実世界の設定のダイナミクスにおける人間の感情的な行動を理解するには、顔表情認識 (FER) モデルがユーザーの表情、文脈上の属性、および環境における個人差に継続的に適応する必要があります。ベンチマーク データセット上で個別に事前トレーニングされた現在の (深い) 機械学習 (ML) ベースの FER アプローチは、データが増分的にのみ利用可能であり、インタラクション中にエージェントまたはロボットによって取得される現実世界のインタラクションの微妙なニュアンスを捉えることができません。新しい学習には以前の知識が犠牲になり、その結果、壊滅的な忘却が生じます。一方、生涯学習または継続学習 (CL) は、データ分布の変化に敏感に反応し、以前に学習した知識を妨げることなく新しい情報を統合することでエージェントの適応性を可能にします。この研究では、CL を FER の効果的な学習パラダイムとして想定し、FER タスクで一般的な CL テクニックを評価する連続顔表情認識 (ConFER) ベンチマークを示します。 CK+、RAF-DB、AffectNet などの一般的な FER データセットに対するいくつかの CL ベースのアプローチの比較分析を示し、Affective Computing (AC) 研究のための ConFER の実装を成功させるための戦略を示します。 CL テクニックは、さまざまな学習設定の下で、いくつかのデータセットにわたって最先端 (SOTA) のパフォーマンスを達成することが示されており、人間の行動の理解、特に顔の表情からの理解に CL の原則を適用する利点についての議論が活発化しています。伴う課題。
Understanding human affective behaviour, especially in the dynamics of real-world settings, requires Facial Expression Recognition (FER) models to continuously adapt to individual differences in user expression, contextual attributions, and the environment. Current (deep) Machine Learning (ML)-based FER approaches pre-trained in isolation on benchmark datasets fail to capture the nuances of real-world interactions where data is available only incrementally, acquired by the agent or robot during interactions. New learning comes at the cost of previous knowledge, resulting in catastrophic forgetting. Lifelong or Continual Learning (CL), on the other hand, enables adaptability in agents by being sensitive to changing data distributions, integrating new information without interfering with previously learnt knowledge. Positing CL as an effective learning paradigm for FER, this work presents the Continual Facial Expression Recognition (ConFER) benchmark that evaluates popular CL techniques on FER tasks. It presents a comparative analysis of several CL-based approaches on popular FER datasets such as CK+, RAF-DB, and AffectNet and present strategies for a successful implementation of ConFER for Affective Computing (AC) research. CL techniques, under different learning settings, are shown to achieve state-of-the-art (SOTA) performance across several datasets, thus motivating a discussion on the benefits of applying CL principles towards human behaviour understanding, particularly from facial expressions, as well the challenges entailed.