arXiv reaDer
Iterative Distillation for Better Uncertainty Estimates in Multitask Emotion Recognition
感情を認識するとき、感情の表示の微妙なニュアンスは、感情の知覚に曖昧さや不確実性を生み出します。感情の不確実性は、以前は複数のアノテーター間の評価者間の不一致として解釈されていました。このホワイトペーパーでは、より一般的でやりがいのあるシナリオを検討します。単一の感情ラベルしか使用できない場合の感情の不確実性のモデル化です。ベイズの観点から、複数の感情記述子、つまりアクションユニット、離散式ラベル、連続記述子の不確実性をキャプチャするために、深いアンサンブルを使用することを提案します。さらに、反復自己蒸留を適用します。複数世代にわたる反復蒸留により、感情認識と不確実性推定の両方のパフォーマンスが大幅に向上します。私たちの方法は、ドメイン内のサンプルの不確実性の正確な推定値を提供する単一の学生モデルと、ドメイン外のサンプルを検出できる学生アンサンブルを生成します。 Aff-wild2データセットを使用した感情認識と不確実性推定に関する実験は、アルゴリズムが温度スケーリングとモンテキャロルドロップアウトの両方よりも信頼性の高い不確実性推定を提供することを示しています。
When recognizing emotions, subtle nuances in displays of emotion generate ambiguity or uncertainty in emotion perception. Emotion uncertainty has been previously interpreted as inter-rater disagreement among multiple annotators. In this paper, we consider a more common and challenging scenario: modeling emotion uncertainty when only single emotion labels are available. From a Bayesian perspective, we propose to use deep ensembles to capture uncertainty for multiple emotion descriptors, i.e., action units, discrete expression labels and continuous descriptors. We further apply iterative self-distillation. Iterative distillation over multiple generations significantly improves performance in both emotion recognition and uncertainty estimation. Our method generates single student models that provide accurate estimates of uncertainty for in-domain samples and a student ensemble that can detect out-of-domain samples. Our experiments on emotion recognition and uncertainty estimation using the Aff-wild2 dataset demonstrate that our algorithm gives more reliable uncertainty estimates than both Temperature Scaling and Monte Carol Dropout.
updated: Sun Oct 17 2021 12:20:18 GMT+0000 (UTC)
published: Wed Jul 21 2021 09:49:16 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト