arXiv reaDer
A Decoupled 3D Facial Shape Model by Adversarial Training
  データ駆動型の生成3D顔モデルを使用して、顔の形状データを意味のあるパラメトリック表現にコンパクトにエンコードします。これらのモデルの望ましい特性は、特定のアイデンティティと表現において、自然な変動源を効果的に分離する能力です。その目的のために因数分解表現が提案されていますが、表現できるなどのタスクに適用される場合、キャプチャできる変動性は依然として制限され、モデリングアーティファクトを提示する可能性があります。この作業では、Generative Adversarial Networksの新しい方向性を探り、特に自然要因を分離する際に、より多様なサンプルを達成しながら、顔モデリングパフォーマンスの向上に貢献することを示します。モデルをトレーニングするために、3Dジェネレーターと、従来のCNNを活用する2D識別器を組み合わせた新しいアーキテクチャを導入します。2つのコンポーネントは、ジオメトリマッピングレイヤーによってブリッジされます。さらに、補助分類子に基づいて、アイデンティティと表現の属性を明示的に解くためのトレーニングスキームを示します。標準顔データセットの定量的および定性的結果を通じて、モデルの利点を説明し、デカップリングと多様性の点で競合する最先端の方法よりも優れていることを示します。
Data-driven generative 3D face models are used to compactly encode facial shape data into meaningful parametric representations. A desirable property of these models is their ability to effectively decouple natural sources of variation, in particular identity and expression. While factorized representations have been proposed for that purpose, they are still limited in the variability they can capture and may present modeling artifacts when applied to tasks such as expression transfer. In this work, we explore a new direction with Generative Adversarial Networks and show that they contribute to better face modeling performances, especially in decoupling natural factors, while also achieving more diverse samples. To train the model we introduce a novel architecture that combines a 3D generator with a 2D discriminator that leverages conventional CNNs, where the two components are bridged by a geometry mapping layer. We further present a training scheme, based on auxiliary classifiers, to explicitly disentangle identity and expression attributes. Through quantitative and qualitative results on standard face datasets, we illustrate the benefits of our model and demonstrate that it outperforms competing state of the art methods in terms of decoupling and diversity.
updated: Sat Sep 07 2019 17:19:26 GMT+0000 (UTC)
published: Sun Feb 10 2019 15:15:44 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト