arXiv reaDer
ジェネレーティブ モーフィングのためのランドマーク適用とスタイル操作
Landmark Enforcement and Style Manipulation for Generative Morphing
モーフ画像は、敵対者が別の被写体と身元を交換できるようにすることで、複数の個人として提示することで顔認識システム (FRS) を脅かします。敵対的生成ネットワーク (GAN) を使用したモーフ生成では、ランドマーク ベースの方法によって引き起こされる空間アーティファクトの影響を受けない高品質のモーフが得られますが、標準的な GAN ベースのモーフィング方法との同一性が明らかに失われます。この論文では、この問題を解決するためにランドマーク強制法を導入することにより、新しいStyleGANモーフ生成手法を提案します。この方法を考慮して、モーフ画像のランドマークが正真正銘の顔のランドマークの空間平均を表すようにし、続いてモーフ画像が両方の正真正銘の顔の幾何学的同一性を継承することを目指します。私たちのモデルの潜在空間の探索は、主成分分析 (PCA) を使用して行われ、モーフィングされた潜在表現に対する善意の顔の両方の効果を強調し、潜在ドメイン平均化によるアイデンティティ損失の問題に対処します。さらに、モーフの高周波再構成を改善するために、StyleGAN2 モデルのノイズ入力のトレーニング能力を研究します。
Morph images threaten Facial Recognition Systems (FRS) by presenting as multiple individuals, allowing an adversary to swap identities with another subject. Morph generation using generative adversarial networks (GANs) results in high-quality morphs unaffected by the spatial artifacts caused by landmark-based methods, but there is an apparent loss in identity with standard GAN-based morphing methods. In this paper, we propose a novel StyleGAN morph generation technique by introducing a landmark enforcement method to resolve this issue. Considering this method, we aim to enforce the landmarks of the morph image to represent the spatial average of the landmarks of the bona fide faces and subsequently the morph images to inherit the geometric identity of both bona fide faces. Exploration of the latent space of our model is conducted using Principal Component Analysis (PCA) to accentuate the effect of both the bona fide faces on the morphed latent representation and address the identity loss issue with latent domain averaging. Additionally, to improve high frequency reconstruction in the morphs, we study the train-ability of the noise input for the StyleGAN2 model.
updated: Tue Oct 18 2022 22:10:25 GMT+0000 (UTC)
published: Tue Oct 18 2022 22:10:25 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト