arXiv reaDer
注意をそらす:顔の表情認識のためのマルチヘッドクロスアテンションネットワーク
Distract Your Attention: Multi-head Cross Attention Network for Facial Expression Recognition
Distract your Attention Network(DAN)と呼ばれる新しい表情認識ネットワークを紹介します。私たちの方法は、2つの重要な観察に基づいています。まず、複数のクラスが本質的に類似した基本的な顔の外観を共有し、それらの違いは微妙である可能性があります。第二に、顔の表情は複数の顔の領域を通して同時に現れ、認識には、局所的な特徴間の高次の相互作用をエンコードすることによる全体的なアプローチが必要です。これらの問題に対処するために、機能クラスタリングネットワーク(FCN)、マルチヘッドクロスアテンションネットワーク(MAN)、およびアテンションフュージョンネットワーク(AFN)の3つの主要コンポーネントを備えたDANを提案します。 FCNは、クラスの分離可能性を最大化するためにマージンの大きい学習目標を採用することにより、堅牢な機能を抽出します。さらに、MANは多数の注意ヘッドをインスタンス化して、複数の顔の領域に同時に注意を向け、これらの領域に注意マップを作成します。さらに、AFNは、アテンションマップを包括的なものに融合する前に、これらのアテンションを複数の場所に注意をそらします。 3つの公開データセット(AffectNet、RAF-DB、SFEW 2.0を含む)での広範な実験により、提案された方法が常に最先端の表情認識パフォーマンスを達成することが確認されました。コードはhttps://github.com/yaoing/DANで利用できるようになります。
We present a novel facial expression recognition network, called Distract your Attention Network (DAN). Our method is based on two key observations. Firstly, multiple classes share inherently similar underlying facial appearance, and their differences could be subtle. Secondly, facial expressions exhibit themselves through multiple facial regions simultaneously, and the recognition requires a holistic approach by encoding high-order interactions among local features. To address these issues, we propose our DAN with three key components: Feature Clustering Network (FCN), Multi-head cross Attention Network (MAN), and Attention Fusion Network (AFN). The FCN extracts robust features by adopting a large-margin learning objective to maximize class separability. In addition, the MAN instantiates a number of attention heads to simultaneously attend to multiple facial areas and build attention maps on these regions. Further, the AFN distracts these attentions to multiple locations before fusing the attention maps to a comprehensive one. Extensive experiments on three public datasets (including AffectNet, RAF-DB, and SFEW 2.0) verified that the proposed method consistently achieves state-of-the-art facial expression recognition performance. Code will be made available at https://github.com/yaoing/DAN.
updated: Mon May 22 2023 03:19:49 GMT+0000 (UTC)
published: Wed Sep 15 2021 13:15:54 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト