arXiv reaDer
Face-GCN:3D動的顔識別/認識のためのグラフ畳み込みネットワーク
Face-GCN: A Graph Convolutional Network for 3D Dynamic Face Identification/Recognition
顔の識別/認識は、過去数年間で大幅に進歩しました。ただし、提案されているアプローチのほとんどは、静的RGBフレームとニュートラルな表情に依存しています。これには2つの欠点があります。まず、重要な顔の形の手がかりは無視されます。第二に、表情による顔の変形は、そのような方法のパフォーマンスに影響を与える可能性があります。本論文では、顔のキーポイントに基づく動的な3D顔識別/認識のための新しいフレームワークを提案します。顔の表情の各動的シーケンスは、3D顔のランドマークを使用して作成された時空間グラフとして表されます。各グラフノードには、その近傍から抽出されたローカルの形状とテクスチャの特徴が含まれています。顔の分類/識別には、時空間グラフ畳み込みネットワーク(ST-GCN)が使用されます。最後に、挑戦的な動的3D顔の表情データセットで私たちのアプローチを評価します。
Face identification/recognition has significantly advanced over the past years. However, most of the proposed approaches rely on static RGB frames and on neutral facial expressions. This has two disadvantages. First, important facial shape cues are ignored. Second, facial deformations due to expressions can have an impact in the performance of such a method. In this paper, we propose a novel framework for dynamic 3D face identification/recognition based on facial keypoints. Each dynamic sequence of facial expressions is represented as a spatio-temporal graph, which is constructed using 3D facial landmarks. Each graph node contains local shape and texture features that are extracted from its neighborhood. For the classification/identification of faces, a Spatio-temporal Graph Convolutional Network (ST-GCN) is used. Finally, we evaluate our approach on a challenging dynamic 3D facial expression dataset.
updated: Mon Apr 19 2021 09:05:39 GMT+0000 (UTC)
published: Mon Apr 19 2021 09:05:39 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト