arXiv reaDer
ローカリゼーション機能を備えたGAN生成の洪水画像を検出するためのアーキテクチャ
An Architecture for the detection of GAN-generated Flood Images with Localization Capabilities
このホワイトペーパーでは、新しい画像フォレンジックタスク、つまり、ClimateGANアーキテクチャによって生成された偽の洪水画像の検出について説明します。これを行うには、検出ブランチとローカリゼーションブランチの両方を含むハイブリッドディープラーニングアーキテクチャを提案します。後者は、ClimateGANによって操作される画像領域の識別に専念しています。実際、私たちの目標が偽の洪水画像の検出である場合でも、ローカリゼーションブランチを追加すると、ネットワークが最も関連性の高い画像領域に焦点を合わせるのに役立ち、一般化機能と画像処理操作に対する堅牢性が大幅に向上することがわかりました。提案されたアーキテクチャの優れたパフォーマンスは、インターネットからダウンロードされた元の洪水画像の2つのデータセットと、ClimateGANによって生成された多数の多様なストリート画像から生成された偽の洪水画像の3つのデータセットで検証されます。
In this paper, we address a new image forensics task, namely the detection of fake flood images generated by ClimateGAN architecture. We do so by proposing a hybrid deep learning architecture including both a detection and a localization branch, the latter being devoted to the identification of the image regions manipulated by ClimateGAN. Even if our goal is the detection of fake flood images, in fact, we found that adding a localization branch helps the network to focus on the most relevant image regions with significant improvements in terms of generalization capabilities and robustness against image processing operations. The good performance of the proposed architecture is validated on two datasets of pristine flood images downloaded from the internet and three datasets of fake flood images generated by ClimateGAN starting from a large set of diverse street images.
updated: Sat May 14 2022 14:23:44 GMT+0000 (UTC)
published: Sat May 14 2022 14:23:44 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト