arXiv reaDer
Towards a complete 3D morphable model of the human head
 3次元モーフィングモデル(3DMM)は、オブジェクトクラスの3D形状とテクスチャを表すための強力な統計ツールです。ここでは、顔、頭蓋、耳、目、歯、舌など、これまでで最も完全な人間の頭の3DMMを紹介します。これを実現するために、重複する異なる頭部の既存の3DMMを結合する2つの方法を提案します。リグレッサーを使用して、一方のモデルの欠落部分をもう一方のモデルを使用して完成させる、ii。 Gaussian Processフレームワークを使用して、複数のモデルからの共分散行列をブレンドします。したがって、既存の顔モデル(LSFM)の変動性と顔の詳細を既存の頭部モデル(LYHM)の完全な頭部モデリング機能とブレンドする、新しい顔と頭の組み合わせた形状モデルを構築します。次に、耳の形状のバリエーションを拡張するために、非常に詳細な耳モデルを構築および融合します。目と目の領域のモデルは、歯、舌、および内部の口腔の基本的なモデルとともに、頭のモデルに組み込まれています。新しいモデルは、最先端のパフォーマンスを実現します。モデルを使用して、単一の制約のない画像から完全な頭部表現を再構築し、耳の形状、視線、目の色とともに、頭蓋顔面の形状とテクスチャーをパラメーター化できます。
Three-dimensional Morphable Models (3DMMs) are powerful statistical tools for representing the 3D shapes and textures of an object class. Here we present the most complete 3DMM of the human head to date that includes face, cranium, ears, eyes, teeth and tongue. To achieve this, we propose two methods for combining existing 3DMMs of different overlapping head parts: i. use a regressor to complete missing parts of one model using the other, ii. use the Gaussian Process framework to blend covariance matrices from multiple models. Thus we build a new combined face-and-head shape model that blends the variability and facial detail of an existing face model (the LSFM) with the full head modelling capability of an existing head model (the LYHM). Then we construct and fuse a highly-detailed ear model to extend the variation of the ear shape. Eye and eye region models are incorporated into the head model, along with basic models of the teeth, tongue and inner mouth cavity. The new model achieves state-of-the-art performance. We use our model to reconstruct full head representations from single, unconstrained images allowing us to parameterize craniofacial shape and texture, along with the ear shape, eye gaze and eye color.
updated: Wed Feb 19 2020 23:23:21 GMT+0000 (UTC)
published: Mon Nov 18 2019 23:58:34 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト