ディープラーニングを合成メディア生成に適用すると、限られた技術的専門知識で、DeepFakesと呼ばれる説得力のある偽造を作成できます。 DeepFake検出は、ますます活発な研究分野です。この論文では、ヘッドポーズ推定に基づく既存のDeepFake検出手法を分析します。これは、オートエンコーダベースの顔スワップを使用して偽の画像を生成するときに適用できます。既存の文献は、この方法が効果的なDeepFake検出器であり、その動機付けの原則が魅力的に単純であることを示唆しています。これらの原理を使用して新しいDeepFake検出器を開発することを目的として、既存の方法の再現性調査を実施します。その有名な地位にもかかわらず、そのメリットは劇的に誇張されていると結論付けます。この不一致を調査することにより、顔のランドマークの検出、アイデンティティにとらわれない頭のポーズの推定、DeepFake検出器のアルゴリズムのバイアスに関連する重要で一般化可能な洞察を明らかにします。私たちの結果は、DeepFake検出のための最先端のパフォーマンスに関する現在の文献の認識を修正しています。
Applications of deep learning to synthetic media generation allow the creation of convincing forgeries, called DeepFakes, with limited technical expertise. DeepFake detection is an increasingly active research area. In this paper, we analyze an existing DeepFake detection technique based on head pose estimation, which can be applied when fake images are generated with an autoencoder-based face swap. Existing literature suggests that this method is an effective DeepFake detector, and its motivating principles are attractively simple. With an eye towards using these principles to develop new DeepFake detectors, we conduct a reproducibility study of the existing method. We conclude that its merits are dramatically overstated, despite its celebrated status. By investigating this discrepancy we uncover a number of important and generalizable insights related to facial landmark detection, identity-agnostic head pose estimation, and algorithmic bias in DeepFake detectors. Our results correct the current literature's perception of state of the art performance for DeepFake detection.