arXiv reaDer
効果的な顔の表情認識のための特徴分解と再構成学習
Feature Decomposition and Reconstruction Learning for Effective Facial Expression Recognition
本論文では、効果的な表情認識のための新しい特徴分解および再構成学習(FDRL)法を提案する。式情報は、異なる式間で共有される情報(式の類似性)と、各式の一意の情報(式固有のバリエーション)の組み合わせと見なされます。より具体的には、FDRLは主に、機能分解ネットワーク(FDN)と機能再構築ネットワーク(FRN)の2つの重要なネットワークで構成されています。特に、FDNはまず、バックボーンネットワークから抽出された基本的な特徴を、顔のアクションを意識した潜在的な特徴のセットに分解して、表現の類似性をモデル化します。次に、FRNは、潜在機能の機能内および機能間の関係をキャプチャして、式固有のバリエーションを特徴付け、式機能を再構築します。この目的のために、機能内関係モデリングモジュールと機能間関係モデリングモジュールを含む2つのモジュールがFRNで開発されています。ラボ内データベース(CK +、MMI、およびOulu-CASIAを含む)とワイルド内データベース(RAF-DBおよびSFEWを含む)の両方での実験結果は、提案されたFDRLメソッドが一貫してより高い認識精度を達成することを示していますいくつかの最先端の方法。これは、式を分類するための特徴の分解と再構築の利点を明確に強調しています。
In this paper, we propose a novel Feature Decomposition and Reconstruction Learning (FDRL) method for effective facial expression recognition. We view the expression information as the combination of the shared information (expression similarities) across different expressions and the unique information (expression-specific variations) for each expression. More specifically, FDRL mainly consists of two crucial networks: a Feature Decomposition Network (FDN) and a Feature Reconstruction Network (FRN). In particular, FDN first decomposes the basic features extracted from a backbone network into a set of facial action-aware latent features to model expression similarities. Then, FRN captures the intra-feature and inter-feature relationships for latent features to characterize expression-specific variations, and reconstructs the expression feature. To this end, two modules including an intra-feature relation modeling module and an inter-feature relation modeling module are developed in FRN. Experimental results on both the in-the-lab databases (including CK+, MMI, and Oulu-CASIA) and the in-the-wild databases (including RAF-DB and SFEW) show that the proposed FDRL method consistently achieves higher recognition accuracy than several state-of-the-art methods. This clearly highlights the benefit of feature decomposition and reconstruction for classifying expressions.
updated: Wed Apr 21 2021 01:19:47 GMT+0000 (UTC)
published: Mon Apr 12 2021 02:22:45 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト