Visual Question Answering(VQA)の従来のアプローチでは、トレーニングに大量のラベル付きデータが必要です。残念ながら、そのような大規模なデータは通常、医療分野では利用できません。本稿では、ラベル付きデータの制限を克服する新しい医療VQAフレームワークを提案します。提案されたフレームワークは、教師なしのノイズ除去オートエンコーダー(DAE)および教師付きメタ学習の使用を調査します。 DAEの利点は、ラベル付けされていない大量の画像を活用することです。一方、メタ学習の利点は、ラベル付けされたデータが限られているVQA問題にすばやく適応するメタウェイトを学習することです。これらの手法の利点を活用することにより、小さなラベル付きトレーニングセットを使用して、提案されたフレームワークを効率的にトレーニングできます。実験結果は、提案された方法が最先端の医療VQAを大幅に上回ることを示しています。
Traditional approaches for Visual Question Answering (VQA) require large amount of labeled data for training. Unfortunately, such large scale data is usually not available for medical domain. In this paper, we propose a novel medical VQA framework that overcomes the labeled data limitation. The proposed framework explores the use of the unsupervised Denoising Auto-Encoder (DAE) and the supervised Meta-Learning. The advantage of DAE is to leverage the large amount of unlabeled images while the advantage of Meta-Learning is to learn meta-weights that quickly adapt to VQA problem with limited labeled data. By leveraging the advantages of these techniques, it allows the proposed framework to be efficiently trained using a small labeled training set. The experimental results show that our proposed method significantly outperforms the state-of-the-art medical VQA.