ポーズ不変の顔認識とは、さまざまなポーズからキャプチャされた顔画像を分析することにより、人物を識別または検証する問題を指します。この問題は、ポーズ、照明、顔の表情が大きく異なるため、困難です。ポーズの変化に対処するための有望なアプローチは、野生の顔から抽出された不完全なUVマップを実行し、完成したUVマップをフィットした3Dメッシュにアタッチして、最後に任意のポーズの異なる2D顔を生成することです。合成された顔は、深い顔認識モデルをトレーニングするためのポーズのバリエーションを増やし、テスト段階でのポーズの不一致を減らします。この論文では、UVマップの完成度を向上させるためにAttentionResCUNet-GANと呼ばれる新しい生成モデルを提案します。いくつかのU-Netを使用して、元のUV-GANを強化します。特に、各U-Net内のスキップ接続は、アテンションゲートによって強化されます。一方、2つのU-Netの機能は、トレーニング可能なスカラー重みと融合されています。 Multi-PIE、LFW、CPLWF、CFPデータセットを含む一般的なベンチマークでの実験は、提案された方法が他の既存の方法と比較して優れたパフォーマンスをもたらすことを示しています。
Pose-invariant face recognition refers to the problem of identifying or verifying a person by analyzing face images captured from different poses. This problem is challenging due to the large variation of pose, illumination and facial expression. A promising approach to deal with pose variation is to fulfill incomplete UV maps extracted from in-the-wild faces, then attach the completed UV map to a fitted 3D mesh and finally generate different 2D faces of arbitrary poses. The synthesized faces increase the pose variation for training deep face recognition models and reduce the pose discrepancy during the testing phase. In this paper, we propose a novel generative model called Attention ResCUNet-GAN to improve the UV map completion. We enhance the original UV-GAN by using a couple of U-Nets. Particularly, the skip connections within each U-Net are boosted by attention gates. Meanwhile, the features from two U-Nets are fused with trainable scalar weights. The experiments on the popular benchmarks, including Multi-PIE, LFW, CPLWF and CFP datasets, show that the proposed method yields superior performance compared to other existing methods.