arXiv reaDer
ディープフェイクビデオ検出における時間依存性の有効性
The Effectiveness of Temporal Dependency in Deepfake Video Detection
ディープフェイクは、悪意のある目的で個人の偽のビデオを生成するために使用される合成画像生成の形式です。結果として得られるビデオは、誤った情報を広めたり、メディアへの信頼を低下させたり、恐喝の形で使用したりする可能性があります。これらの脅威は、ディープフェイクビデオ検出の自動化された方法を必要とします。この論文は、時間情報が深層学習モデルの深層偽検出性能を改善できるかどうかを調査します。これを調査するために、新しいアプローチと既存のアプローチをそれらの定義特性によって分類するフレームワークを提案します。これらは特徴抽出のタイプです:自動または手動、およびフレーム間の時間的関係:依存または独立。このフレームワークを適用して、モデルのディープフェイク検出パフォーマンスに対する時間依存性の影響を調査します。時間依存性は、自動特徴選択を使用してモデルの実際の画像を分類する際に統計的に有意な(p <0.05)パフォーマンスの向上をもたらすことがわかり、時空間情報がディープフェイクビデオ検出モデルのパフォーマンスを向上させることができることを示しています。
Deepfakes are a form of synthetic image generation used to generate fake videos of individuals for malicious purposes. The resulting videos may be used to spread misinformation, reduce trust in media, or as a form of blackmail. These threats necessitate automated methods of deepfake video detection. This paper investigates whether temporal information can improve the deepfake detection performance of deep learning models. To investigate this, we propose a framework that classifies new and existing approaches by their defining characteristics. These are the types of feature extraction: automatic or manual, and the temporal relationship between frames: dependent or independent. We apply this framework to investigate the effect of temporal dependency on a model's deepfake detection performance. We find that temporal dependency produces a statistically significant (p < 0.05) increase in performance in classifying real images for the model using automatic feature selection, demonstrating that spatio-temporal information can increase the performance of deepfake video detection models.
updated: Fri May 13 2022 14:39:25 GMT+0000 (UTC)
published: Fri May 13 2022 14:39:25 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト