ますます多くの研究がVQAモデルの意思決定プロセスを調査しています。これらの研究の多くは、モデルによって選択された正解の背後にある理由に焦点を当てています。それでも、モデルによって気が散る答えが選ばれた理由はほとんど研究されていません。この目的のために、既存のVQAモデルの決定境界を説明するVQAのテキストディストラクタ生成(DG-VQA)と呼ばれる新しいタスクを紹介します。 DG-VQAの目標は、既存のモデルの脆弱性を明らかにする複数選択のVQAタスクで最も紛らわしいテキストディストラクタのセットを生成することです(つまり、既存のモデルを失敗させるディストラクタを生成することです)。 DG-VQAをマルコフ決定過程として定式化できることを示し、教師なしの方法で気を散らすものを考え出すための強化学習ソリューションを提示します。このソリューションは、以前のディストラクタ生成方法に大きな注釈付きコーパスの問題がないことに対処します。提案されたモデルは、完全にトレーニングされた複数選択VQAモデルから報酬信号を受け取り、ポリシー勾配を介してそのパラメーターを更新します。経験的結果は、生成されたテキストディストラクタが、64%から平均20%の精度低下で、いくつかの一般的なVQAモデルを正常に攻撃できることを示しています。さらに、生成されたディストラクタを組み込むことにより、VQAモデルの堅牢性を向上させるために敵対的なトレーニングを実施します。経験的結果は、複数選択のVQAタスクで27%のパフォーマンスの向上を示すことにより、敵対的なトレーニングの有効性を検証します。
An increasing amount of studies have investigated the decision-making process of VQA models. Many of these studies focus on the reason behind the correct answer chosen by a model. Yet, the reason why the distracting answer chose by a model has rarely been studied. To this end, we introduce a novel task called textual Distractors Generation for VQA (DG-VQA) that explaining the decision boundaries of existing VQA models. The goal of DG-VQA is to generate the most confusing set of textual distractors in multi-choice VQA tasks which expose the vulnerability of existing models (i.e. to generate distractors that lure existing models to fail). We show that DG-VQA can be formulated as a Markov Decision Process, and present a reinforcement learning solution to come up with distractors in an unsupervised manner. The solution addresses the lack of large annotated corpus issues in previous distractor generation methods. Our proposed model receives reward signals from fully-trained multi-choice VQA models and updates its parameters via policy gradient. The empirical results show that the generated textual distractors can successfully attack several popular VQA models with an average 20% accuracy drop from 64%. Furthermore, we conduct adversarial training to improve the robustness of VQA models by incorporating the generated distractors. Empirical results validate the effectiveness of adversarial training by showing a performance improvement of 27% for the multi-choice VQA task.