arXiv reaDer
半教師あり顔感情行動分析のためのマルチタスク平均教師
A Multi-task Mean Teacher for Semi-supervised Facial Affective Behavior Analysis
感情行動分析は、人間とコンピューターの相互作用において重要な部分です。既存のマルチタスク感情行動認識方法は、不完全なラベル付きデータセットの問題に悩まされています。この問題に取り組むために、このペーパーでは、追加のラベルなしデータを活用するための平均的な教師フレームワークを備えた半教師ありモデルを紹介します。具体的には、3種類の顔の感情表現を同時に学習するマルチタスクモデルを提案します。その後、提案されたモデルは、学生と教師のネットワークに割り当てられます。ラベルなしデータを使用してトレーニングする場合、教師ネットワークを使用して、学生ネットワークトレーニングの疑似ラベルを予測します。これにより、ラベルなしデータから学習できます。実験結果は、提案された方法がベースラインモデルよりもはるかに優れたパフォーマンスを達成し、競争トラック1とトラック2の両方で4位、トラック3で6位にランク付けされたことを示しました。これは、提案されたネットワークが不完全なデータセットから効果的に学習できることを確認します。
Affective Behavior Analysis is an important part in human-computer interaction. Existing multi-task affective behavior recognition methods suffer from the problem of incomplete labeled datasets. To tackle this problem, this paper presents a semi-supervised model with a mean teacher framework to leverage additional unlabeled data. To be specific, a multi-task model is proposed to learn three different kinds of facial affective representations simultaneously. After that, the proposed model is assigned to be student and teacher networks. When training with unlabeled data, the teacher network is employed to predict pseudo labels for student network training, which allows it to learn from unlabeled data. Experimental results showed that our proposed method achieved much better performance than baseline model and ranked 4th in both competition track 1 and track 2, and 6th in track 3, which verifies that the proposed network can effectively learn from incomplete datasets.
updated: Fri Aug 13 2021 07:10:05 GMT+0000 (UTC)
published: Fri Jul 09 2021 05:48:22 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト