arXiv reaDer
3D Face Pose and Animation Tracking via Eigen-Decomposition based Bayesian Approach
  この論文では、単眼カメラで顔のポーズと顔のアニメーションの両方を追跡する新しい方法を紹介します。このアプローチは、3D顔モデルCANDIDEおよびSIFT(Scale Invariant Feature Transform)記述子に基づいており、ベイジアンアプローチでいくつかの指定されたランドマーク(CANDIDEモデルの26個の選択された頂点)の周りで抽出されます。トレーニングフェーズは、最初のビデオフレームから生成された合成データベースで実行されます。現在の各フレームで、ベイズのアプローチを介して顔のポーズとアニメーションのパラメーターが推定され、ガウス事前分布とガウス尤度関数の平均と共分散行列の固有値が固有分解を使用して前のフレームから更新されます。姿勢推定とランドマークの位置に関する数値結果は、ボストン大学の顔追跡(BUFT)データベースとTalking Faceビデオを使用して報告されます。彼らは、他の6つの公開されたアルゴリズムと比較して、私たちのアプローチが非常に良い妥協を提供し、ランドマークのローカリゼーションに関して良い結果が得られるため、有望な展望を提示することを示します。
This paper presents a new method to track both the face pose and the face animation with a monocular camera. The approach is based on the 3D face model CANDIDE and on the SIFT (Scale Invariant Feature Transform) descriptors, extracted around a few given landmarks (26 selected vertices of CANDIDE model) with a Bayesian approach. The training phase is performed on a synthetic database generated from the first video frame. At each current frame, the face pose and animation parameters are estimated via a Bayesian approach, with a Gaussian prior and a Gaussian likelihood function whose the mean and the covariance matrix eigenvalues are updated from the previous frame using eigen decomposition. Numerical results on pose estimation and landmark locations are reported using the Boston University Face Tracking (BUFT) database and Talking Face video. They show that our approach, compared to six other published algorithms, provides a very good compromise and presents a promising perspective due to the good results in terms of landmark localization.
updated: Thu Aug 29 2019 03:59:51 GMT+0000 (UTC)
published: Thu Aug 29 2019 03:59:51 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト