arXiv reaDer
効果的な4D表情認識のための微妙な顔の動きの拡大
Magnifying Subtle Facial Motions for Effective 4D Expression Recognition
この論文では、自動4D顔表情認識(4D FER)への効果的なパイプラインを提案します。これは、コンピュータービジョンの2つの成長しているが異なるアイデアを組み合わせたものです。リーマン幾何学のツールを使用して空間的な顔の変形を計算し、時間フィルタリングを使用してそれらを拡大します。 3D面の流れを最初に分析して、最近開発されたリーマンアプローチに基づいて空間変形をキャプチャします。このアプローチでは、隣接する3D面の登録と比較が共同で行われます。次に、これらの変形の得られた時間的変化は、経時的な顔の活動を増幅するために拡大法に供給される。この論文の主な貢献である後者は、感情分類のパフォーマンスを向上させる微妙な(隠された)変形を明らかにすることを可能にします。 BU-4DFEデータセットでアプローチを評価しました。抽出された幾何学的特徴(変形)を拡大した後、最新の94.18%の平均パフォーマンスと、分類精度の10%を超える改善が達成されました。
In this paper, an effective pipeline to automatic 4D Facial Expression Recognition (4D FER) is proposed. It combines two growing but disparate ideas in Computer Vision -- computing the spatial facial deformations using tools from Riemannian geometry and magnifying them using temporal filtering. The flow of 3D faces is first analyzed to capture the spatial deformations based on the recently-developed Riemannian approach, where registration and comparison of neighboring 3D faces are led jointly. Then, the obtained temporal evolution of these deformations are fed into a magnification method in order to amplify the facial activities over the time. The latter, main contribution of this paper, allows revealing subtle (hidden) deformations which enhance the emotion classification performance. We evaluated our approach on BU-4DFE dataset, the state-of-art 94.18% average performance and an improvement that exceeds 10% in classification accuracy, after magnifying extracted geometric features (deformations), are achieved.
updated: Wed May 05 2021 20:47:43 GMT+0000 (UTC)
published: Wed May 05 2021 20:47:43 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト