arXiv reaDer
敵対的な例の自己監視学習:ディープフェイク検出のための優れた一般化に向けて
Self-supervised Learning of Adversarial Example: Towards Good Generalizations for Deepfake Detection
ディープフェイク検出に関する最近の研究では、顔の偽造のトレーニングとテストが同じデータセットからのものである場合に有望な結果が得られています。ただし、トレーニングデータセット内の目に見えない方法で作成された偽造に検出器を一般化しようとすると、問題は依然として困難です。この作業は、単純な原則から一般化可能なディープフェイクの検出に対処します。一般化可能な表現は、さまざまな種類の偽造に敏感である必要があります。この原則に従って、偽造構成のプールを使用して拡張偽造を合成することにより偽造の「多様性」を強化し、偽造構成を予測するモデルを強制することによって偽造に対する「感度」を強化することを提案します。大規模な偽造増強スペースを効果的に探索するために、敵対的なトレーニング戦略を使用して、現在のモデルに対して最も困難な偽造を動的に合成することをさらに提案します。広範な実験を通じて、提案された戦略が驚くほど効果的であり(図1を参照)、現在の最先端の方法よりも優れたパフォーマンスを達成できることを示しています。コードはhttps://github.com/liangchen527/SLADDで入手できます。
Recent studies in deepfake detection have yielded promising results when the training and testing face forgeries are from the same dataset. However, the problem remains challenging when one tries to generalize the detector to forgeries created by unseen methods in the training dataset. This work addresses the generalizable deepfake detection from a simple principle: a generalizable representation should be sensitive to diverse types of forgeries. Following this principle, we propose to enrich the "diversity" of forgeries by synthesizing augmented forgeries with a pool of forgery configurations and strengthen the "sensitivity" to the forgeries by enforcing the model to predict the forgery configurations. To effectively explore the large forgery augmentation space, we further propose to use the adversarial training strategy to dynamically synthesize the most challenging forgeries to the current model. Through extensive experiments, we show that the proposed strategies are surprisingly effective (see Figure 1), and they could achieve superior performance than the current state-of-the-art methods. Code is available at https://github.com/liangchen527/SLADD.
updated: Fri Apr 01 2022 13:44:46 GMT+0000 (UTC)
published: Wed Mar 23 2022 05:52:23 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト