arXiv reaDer
GANHead: ジェネレーティブなアニメーション可能なニューラル ヘッド アバターに向けて
GANHead: Towards Generative Animatable Neural Head Avatars
デジタル アバターを人々の生活に取り入れるには、完全で現実的でアニメーション化可能な頭部アバターを効率的に生成することが強く求められます。この作業は困難であり、既存の方法ですべての要件を一度に満たすことは困難です。これらの目標を達成するために、GANHead (Generative Animatable Neural Head Avatar) を提案します。これは、明示的な表現パラメーターに対するきめ細かな制御と、暗黙的な表現の現実的なレンダリング結果の両方を利用する新しい生成ヘッド モデルです。具体的には、GANHead は、完全で現実的な頭部アバターを生成する機能を取得するために、正規空間の 3 つのネットワークを介して粗いジオメトリ、微調整されたディテール、およびテクスチャを表します。柔軟なアニメーションを実現するために、標準のリニア ブレンド スキニング (LBS) によって変形ファイルを定義し、学習した連続ポーズと表情ベース、および LBS ウェイトを使用します。これにより、アバターを FLAME パラメータで直接アニメーション化し、目に見えないポーズや表情にうまく一般化することができます。最先端の (SOTA) メソッドと比較して、GANHead は頭部アバターの生成と raw スキャン フィッティングで優れたパフォーマンスを実現します。
To bring digital avatars into people's lives, it is highly demanded to efficiently generate complete, realistic, and animatable head avatars. This task is challenging, and it is difficult for existing methods to satisfy all the requirements at once. To achieve these goals, we propose GANHead (Generative Animatable Neural Head Avatar), a novel generative head model that takes advantages of both the fine-grained control over the explicit expression parameters and the realistic rendering results of implicit representations. Specifically, GANHead represents coarse geometry, fine-gained details and texture via three networks in canonical space to obtain the ability to generate complete and realistic head avatars. To achieve flexible animation, we define the deformation filed by standard linear blend skinning (LBS), with the learned continuous pose and expression bases and LBS weights. This allows the avatars to be directly animated by FLAME parameters and generalize well to unseen poses and expressions. Compared to state-of-the-art (SOTA) methods, GANHead achieves superior performance on head avatar generation and raw scan fitting.
updated: Sat Apr 08 2023 07:56:21 GMT+0000 (UTC)
published: Sat Apr 08 2023 07:56:21 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト