arXiv reaDer
GANprintR: Improved Fakes and Evaluation of the State of the Art in Face Manipulation Detection
大規模なフェイシャルデータベースの利用可能性と、ディープラーニングテクノロジー、特にジェネレーティブアドバサリネットワーク(GAN)の著しい進歩により、非常にリアルなフェイクフェイシャルコンテンツが生成され、誤用の可能性について明らかな懸念が生じています。このような懸念は、人間とは対照的に、さまざまなシナリオですでに驚くべき結果を達成している操作検出方法に関する研究を促進しています。この研究では、特定のタイプの顔の操作である顔全体の画像の合成に焦点を当てます。この研究の主な貢献は4つあります。i)結果の画像の視覚的な品質を維持しながら顔の操作の検出システムを偽装するために、オートエンコーダーに基づく合成偽画像からGANの「指紋」を削除する新しい戦略について説明します。 ii)顔の操作の検出に関する最近の文献の詳細な分析。 iii)このタイプの顔の操作の完全な実験的評価。最先端の偽造検出システム(ホリスティックディープネットワーク、ステガナリシス、およびローカルアーティファクトに基づく)を考慮し、制約のないシナリオでこのタスクがいかに困難であるかを指摘します。最後にiv)iFakeFaceDBという名前の新しいパブリックデータベースを発表します。これは、提案されたGANフィンガープリント削除アプローチ(GANprintR)を、すでに非常にリアルな合成偽画像に適用した結果です。私たちの経験的評価で得られた結果は、この研究で提案されたものなど、目に見えない状態やなりすまし技術に対する堅牢な顔面操作検出システムを開発するために追加の努力が必要であることを示しています。
The availability of large-scale facial databases, together with the remarkable progresses of deep learning technologies, in particular Generative Adversarial Networks (GANs), have led to the generation of extremely realistic fake facial content, raising obvious concerns about the potential for misuse. Such concerns have fostered the research on manipulation detection methods that, contrary to humans, have already achieved astonishing results in various scenarios. In this study, we focus on the synthesis of entire facial images, which is a specific type of facial manipulation. The main contributions of this study are four-fold: i) a novel strategy to remove GAN "fingerprints" from synthetic fake images based on autoencoders is described, in order to spoof facial manipulation detection systems while keeping the visual quality of the resulting images; ii) an in-depth analysis of the recent literature in facial manipulation detection; iii) a complete experimental assessment of this type of facial manipulation, considering the state-of-the-art fake detection systems (based on holistic deep networks, steganalysis, and local artifacts), remarking how challenging is this task in unconstrained scenarios; and finally iv) we announce a novel public database, named iFakeFaceDB, yielding from the application of our proposed GAN-fingerprint Removal approach (GANprintR) to already very realistic synthetic fake images. The results obtained in our empirical evaluation show that additional efforts are required to develop robust facial manipulation detection systems against unseen conditions and spoof techniques, such as the one proposed in this study.
updated: Wed Jul 01 2020 13:51:33 GMT+0000 (UTC)
published: Wed Nov 13 2019 08:48:55 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト