arXiv reaDer
DeepfakeUCL:教師なし対照学習によるディープフェイク検出
DeepfakeUCL: Deepfake Detection via Unsupervised Contrastive Learning
最近、顔のディープフェイク検出で印象的な結果が得られています。顔のディープフェイクを検出するためのほぼすべての既存のディープラーニング手法は完全に監視されており、トレーニング中にラベルが必要です。この論文では、教師なし対照学習による新しいディープフェイク検出方法を設計します。まず、画像の2つの異なる変換バージョンを生成し、それらを2つの連続するサブネットワーク(エンコーダーとプロジェクションヘッド)にフィードします。教師なしトレーニングは、プロジェクションヘッドの出力の対応度を最大化することによって実現されます。教師なし手法の検出パフォーマンスを評価するために、教師なし機能をさらに使用して、効率的な線形分類ネットワークをトレーニングします。広範な実験により、教師なし学習方法により、データセット内およびデータセット間の設定の両方で、最先端の教師あり手法に匹敵する検出パフォーマンスが可能になることが示されています。私達はまた私達の方法のためのアブレーション研究を行います。
Face deepfake detection has seen impressive results recently. Nearly all existing deep learning techniques for face deepfake detection are fully supervised and require labels during training. In this paper, we design a novel deepfake detection method via unsupervised contrastive learning. We first generate two different transformed versions of an image and feed them into two sequential sub-networks, i.e., an encoder and a projection head. The unsupervised training is achieved by maximizing the correspondence degree of the outputs of the projection head. To evaluate the detection performance of our unsupervised method, we further use the unsupervised features to train an efficient linear classification network. Extensive experiments show that our unsupervised learning method enables comparable detection performance to state-of-the-art supervised techniques, in both the intra- and inter-dataset settings. We also conduct ablation studies for our method.
updated: Fri Apr 23 2021 09:48:10 GMT+0000 (UTC)
published: Fri Apr 23 2021 09:48:10 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト