最近の研究では、明らかな性格特性が人間の顔の行動のダイナミクスから反映される可能性があることが示されています。ただし、ほとんどの既存の方法は、個人認識のための潜在的な特徴で単一スケールの短期的な顔の行動のみをエンコードできます。この論文では、最初に各被験者の個人固有のネットワークをトレーニングし、被験者のマルチスケールの長期的な個人固有の行動進化をモデル化する、見かけの人格認識アプローチを認識することを提案します。したがって、ネットワークの重みには、被験者の人固有の顔の行動に関連する手がかりが含まれていると仮定します。次に、個人固有のネットワークの重みを被験者の性格表現としてグラフ表現にエンコードし、性格特性認識のために標準のグラフ ニューラル ネットワーク (GNN) で処理できるようにすることを提案します。実験結果は、私たちの新しいネットワーク重みベースのアプローチが、ほとんどの従来の潜在機能ベースのアプローチよりも優れたパフォーマンスを達成し、最先端の方法に匹敵するパフォーマンスを持っていることを示しています。重要なことは、生成されたグラフ表現は、異なる GNN を使用した場合に堅牢な結果を生成することです。この論文は、個人固有のネットワークの重みが被験者の性格と相関していることをさらに検証しました。
Recent studies show that apparent personality traits can be reflected from human facial behavior dynamics. However, most existing methods can only encode single-scale short-term facial behaviors in the latent features for personality recognition. In this paper, we propose to recognize apparent personality recognition approach which first trains a person-specific network for each subject, modelling multi-scale long-term person-specific behavior evolution of the subject. Consequently, we hypothesize that the weights of the network contain the person-specific facial behavior-related cues of the subject. Then, we propose to encode the weights of the person-specific network to a graph representation, as the personality representation for the subject, allowing them to be processed by standard Graph Neural Networks (GNNs) for personality traits recognition. The experimental results show that our novel network weights-based approach achieved superior performance than most traditional latent feature-based approaches, and has comparable performance to the state-of-the-art method. Importantly, the produced graph representations produce robust results when using different GNNs. This paper further validated that person-specific network's weights are correlated to the subject's personality.