3Dモーファブルモデルは、顔のモデル化に一般的に使用される生成モデルのクラスです。これらは通常、2Dデータからの3D再構成などの不適切な問題に適用されます。この問題の画像形成プロセスにおけるいくつかのあいまいさは、明確に研究されてきました。アイデンティティと表現の変化の非直交性が3Dモーファブルモデルでアイデンティティ表現のあいまいさを引き起こす可能性があり、実際には表現とアイデンティティが直交から遠く離れており、驚くほどうまく相互に説明できることを示します。以前に報告されたあいまいさは逆レンダリング設定でのみ発生しますが、アイデンティティ表現のあいまいさは3D形状生成プロセス自体で発生します。この効果は、3D形状を使用して直接、または逆レンダリングタスクを通じて示し、高品質の3Dスキャンから構築された2つの人気のあるモデルと、2D画像およびビデオの大規模なコレクションから構築されたモデルを使用します。この問題の逆レンダリングへの影響を調査し、アイデンティティと式の変形に関する純粋な統計的事前確率では解決できないことを確認します。
3D Morphable Models are a class of generative models commonly used to model faces. They are typically applied to ill-posed problems such as 3D reconstruction from 2D data. Several ambiguities in this problem's image formation process have been studied explicitly. We demonstrate that non-orthogonality of the variation in identity and expression can cause identity-expression ambiguity in 3D Morphable Models, and that in practice expression and identity are far from orthogonal and can explain each other surprisingly well. Whilst previously reported ambiguities only arise in an inverse rendering setting, identity-expression ambiguity emerges in the 3D shape generation process itself. We demonstrate this effect with 3D shapes directly as well as through an inverse rendering task, and use two popular models built from high quality 3D scans as well as a model built from a large collection of 2D images and videos. We explore this issue's implications for inverse rendering and observe that it cannot be resolved by a purely statistical prior on identity and expression deformations.