表現学習と高効率計算の強力な機能により、ディープハッシュは大規模な画像検索で大きな進歩を遂げました。ただし、ディープハッシュネットワークは敵対的な例に対して脆弱です。これは実用的な安全な問題ですが、ハッシュベースの検索分野ではほとんど研究されていません。この論文では、効率的かつ効果的な標的ハッシュ攻撃のための柔軟な生成アーキテクチャを定式化する、新しいプロトタイプ監視あり敵対的ネットワーク(ProS-GAN)を提案します。私たちの知る限り、これはディープハッシュネットワークを攻撃する最初の世代ベースの方法です。一般に、提案されたフレームワークは、PrototypeNet、ジェネレーター、およびディスクリミネーターの3つの部分で構成されます。具体的には、設計されたPrototypeNetは、ターゲットラベルをセマンティック表現に埋め込み、ターゲットラベルのカテゴリレベルの代表としてプロトタイプコードを学習します。さらに、セマンティック表現と元の画像は、柔軟な標的型攻撃のためにジェネレータに共同で供給されます。特に、プロトタイプコードは、敵対的な例のハッシュコードとプロトタイプコードとの間のハミング距離を最小化することによって、標的とされた敵対的な例を構築するためにジェネレータを監視するために採用される。さらに、ジェネレータは、視覚的に現実的な敵対的な例と有益な意味表現を同時に奨励するために、識別器に反対しています。広範な実験により、提案されたフレームワークが、ディープハッシュの最先端のターゲット攻撃方法よりも優れたターゲット攻撃パフォーマンスと転送可能性を備えた敵対的な例を効率的に生成できることが確認されています。関連するコードはhttps://github.com/xunguangwang/ProS-GANで入手できます。
Due to its powerful capability of representation learning and high-efficiency computation, deep hashing has made significant progress in large-scale image retrieval. However, deep hashing networks are vulnerable to adversarial examples, which is a practical secure problem but seldom studied in hashing-based retrieval field. In this paper, we propose a novel prototype-supervised adversarial network (ProS-GAN), which formulates a flexible generative architecture for efficient and effective targeted hashing attack. To the best of our knowledge, this is the first generation-based method to attack deep hashing networks. Generally, our proposed framework consists of three parts, i.e., a PrototypeNet, a generator, and a discriminator. Specifically, the designed PrototypeNet embeds the target label into the semantic representation and learns the prototype code as the category-level representative of the target label. Moreover, the semantic representation and the original image are jointly fed into the generator for a flexible targeted attack. Particularly, the prototype code is adopted to supervise the generator to construct the targeted adversarial example by minimizing the Hamming distance between the hash code of the adversarial example and the prototype code. Furthermore, the generator is against the discriminator to simultaneously encourage the adversarial examples visually realistic and the semantic representation informative. Extensive experiments verify that the proposed framework can efficiently produce adversarial examples with better targeted attack performance and transferability over state-of-the-art targeted attack methods of deep hashing. The related codes could be available at https://github.com/xunguangwang/ProS-GAN .