このプロジェクトでは、感情認識ドメインで使用される2種類の注釈を備えたデータベースを作成しました。1つだけのモデルよりも優れた結果を達成するために、Action UnitsとValence Arousalです。アプローチの独創性は、感情の予測を実行するために使用されるアーキテクチャのタイプ、すなわちカテゴリカルな生成的敵対ネットワークにも基づいています。この種のデュアルネットワークは、生成ネットワークのおかげで新しいデータセットから画像に基づいて画像を生成し、その識別ネットワークのおかげで画像が偽物であるか本物であるかを判断し、アクションユニットおよびValence Arousalの注釈を予測するのに役立ちますそのカテゴリの性質に。 GANは、異なるパラメーターをテストしてその影響を理解するために、アクションユニットモデルのみ、次にValence Arousalモデルのみ、そしてAction UnitsモデルとValence Arousalモデルの両方でトレーニングされました。 GANの生成的および識別的な側面は、興味深い結果をもたらしました。
In this project, we created a database with two types of annotations used in the emotion recognition domain : Action Units and Valence Arousal to try to achieve better results than with only one model. The originality of the approach is also based on the type of architecture used to perform the prediction of the emotions : a categorical Generative Adversarial Network. This kind of dual network can generate images based on the pictures from the new dataset thanks to its generative network and decide if an image is fake or real thanks to its discriminative network as well as help to predict the annotations for Action Units and Valence Arousal due to its categorical nature. GANs were trained on the Action Units model only, then the Valence Arousal model only and then on both the Action Units model and Valence Arousal model in order to test different parameters and understand their influence. The generative and discriminative aspects of the GANs have performed interesting results.