arXiv reaDer
3D変形可能モデルに基づく認識可能な3D顔形状の再構築
Reconstructing Recognizable 3D Face Shapes based on 3D Morphable Models
最近の多くの作品では、同じアイデンティティの形状パラメータを集約し、パラメトリックモデル(3Dモーフィング可能モデル(3DMM)など)に基づいて異なる人物の形状パラメータを分離することにより、特徴的な3D顔の形状を再構築しています。ただし、これらの形状パラメータを使用した顔認識タスクの精度が高いにもかかわらず、これらのパラメータから再構築された顔の形状の視覚的な識別は不十分です。次のリサーチクエスチョンは、これまでの研究では回答されていません。識別可能な形状パラメータは、表現された3D顔形状の視覚的識別を保証しますか?この論文は、形状パラメータと再構築された形状形状との関係を分析し、形状パラメータと形状形状領域の両方で識別可能性を高めることを目的として、形状パラメータの新しい形状同一性認識正則化(SIR)損失を提案します。さらに、ランドマークとIDの両方の注釈を含むトレーニングデータの不足に対処するために、IDまたはランドマークのラベルを含む混合データを活用するネットワーク構造と関連するトレーニング戦略を提案します。形状パラメータの再構成エラー、視覚的識別可能性、および顔認識精度の点で、既存の方法と私たちの方法を比較します。実験結果は、私たちの方法が最先端の方法よりも優れていることを示しています。
Many recent works have reconstructed distinctive 3D face shapes by aggregating shape parameters of the same identity and separating those of different people based on parametric models (e.g., 3D morphable models (3DMMs)). However, despite the high accuracy in the face recognition task using these shape parameters, the visual discrimination of face shapes reconstructed from those parameters is unsatisfactory. The following research question has not been answered in previous works: Do discriminative shape parameters guarantee visual discrimination in represented 3D face shapes? This paper analyzes the relationship between shape parameters and reconstructed shape geometry and proposes a novel shape identity-aware regularization(SIR) loss for shape parameters, aiming at increasing discriminability in both the shape parameter and shape geometry domains. Moreover, to cope with the lack of training data containing both landmark and identity annotations, we propose a network structure and an associated training strategy to leverage mixed data containing either identity or landmark labels. We compare our method with existing methods in terms of the reconstruction error, visual distinguishability, and face recognition accuracy of the shape parameters. Experimental results show that our method outperforms the state-of-the-art methods.
updated: Sat Dec 25 2021 03:19:20 GMT+0000 (UTC)
published: Thu Apr 08 2021 05:11:48 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト