arXiv reaDer
GANDCTの異常を検出してディープフェイクと戦う
Fighting deepfakes by detecting GAN DCT anomalies
ディープフェイク現象を適切に対比するために、新しいディープフェイク検出アルゴリズムを設計する必要が生じます。この手ごわいAIテクノロジーの誤用は、関係者全員の私生活に深刻な結果をもたらします。最先端のソリューションは、ディープニューラルネットワークを使用して偽のマルチメディアコンテンツを検出するソリューションで急増していますが、残念ながら、これらのアルゴリズムは一般化も説明もできないようです。ただし、ディープフェイクの作成中にGenerative Adversarial Network(GAN)エンジンによって残されたトレースは、アドホック周波数を分析することで検出できます。このため、この論文では、さまざまな生成アーキテクチャの固有のフィンガープリントを表す、いわゆるGAN固有周波数(GSF)を検出できる新しいパイプラインを提案します。離散コサイン変換(DCT)を使用することにより、異常な周波数が検出されました。 AC係数分布によって推測される\ BETA統計は、GANエンジンで生成されたデータを認識するための鍵となっています。 JPEG圧縮、ミラーリング、回転、スケーリング、ランダムなサイズの長方形の追加など、画像に対するさまざまな攻撃を使用した手法の有効性を実証するために、堅牢性テストも実施されました。実験により、この方法は革新的であり、最先端技術を超えており、説明可能性に関して多くの洞察が得られることが実証されました。
To properly contrast the Deepfake phenomenon the need to design new Deepfake detection algorithms arises; the misuse of this formidable A.I. technology brings serious consequences in the private life of every involved person. State-of-the-art proliferates with solutions using deep neural networks to detect a fake multimedia content but unfortunately these algorithms appear to be neither generalizable nor explainable. However, traces left by Generative Adversarial Network (GAN) engines during the creation of the Deepfakes can be detected by analyzing ad-hoc frequencies. For this reason, in this paper we propose a new pipeline able to detect the so-called GAN Specific Frequencies (GSF) representing a unique fingerprint of the different generative architectures. By employing Discrete Cosine Transform (DCT), anomalous frequencies were detected. The \BETA statistics inferred by the AC coefficients distribution have been the key to recognize GAN-engine generated data. Robustness tests were also carried out in order to demonstrate the effectiveness of the technique using different attacks on images such as JPEG Compression, mirroring, rotation, scaling, addition of random sized rectangles. Experiments demonstrated that the method is innovative, exceeds the state of the art and also give many insights in terms of explainability.
updated: Wed Aug 11 2021 08:41:03 GMT+0000 (UTC)
published: Sun Jan 24 2021 19:45:11 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト