生成モデルの急速なペースは、悪意のあるなりすましやデジタル著作権侵害などの視覚的フォレンジックに新たな脅威をもたらし、偽の画像帰属に関する作業を促進しています。偽の画像アトリビューションに関する既存の作業は、主に直接分類フレームワークに依存しています。追加の監視がなければ、抽出された特徴には多くのコンテンツ関連コンポーネントが含まれ、一般化が不十分になる可能性があります。一方、決定を説明するために解釈可能なGANフィンガープリントを取得する方法は、未解決の問題のままです。マルチタスクフレームワークを採用して、GAN指紋解きほぐしネットワーク(GFD-Net)を提案し、GANで生成された画像から指紋を解きほぐし、偽の画像アトリビューションのコンテンツに関係のない表現を生成します。指紋の安定性と識別可能性を保証するために一連の制約が提供され、コンテンツに関係のない特徴抽出に役立ちます。さらに、GANフィンガープリントの包括的な分析を実行し、GANフィンガープリントのプロパティと、GANアーキテクチャでフィンガープリントを支配する要因に関するいくつかの手がかりを提供します。実験によると、GFD-Netは、クローズドワールドとオープンワールドの両方のテストで優れた偽の画像アトリビューションパフォーマンスを実現しています。また、バイナリ偽画像検出にこの方法を適用し、目に見えないジェネレーターで重要な一般化能力を示します。
Rapid pace of generative models has brought about new threats to visual forensics such as malicious personation and digital copyright infringement, which promotes works on fake image attribution. Existing works on fake image attribution mainly rely on a direct classification framework. Without additional supervision, the extracted features could include many content-relevant components and generalize poorly. Meanwhile, how to obtain an interpretable GAN fingerprint to explain the decision remains an open question. Adopting a multi-task framework, we propose a GAN Fingerprint Disentangling Network (GFD-Net) to simultaneously disentangle the fingerprint from GAN-generated images and produce a content-irrelevant representation for fake image attribution. A series of constraints are provided to guarantee the stability and discriminability of the fingerprint, which in turn helps content-irrelevant feature extraction. Further, we perform comprehensive analysis on GAN fingerprint, providing some clues about the properties of GAN fingerprint and which factors dominate the fingerprint in GAN architecture. Experiments show that our GFD-Net achieves superior fake image attribution performance in both closed-world and open-world testing. We also apply our method in binary fake image detection and exhibit a significant generalization ability on unseen generators.