arXiv reaDer
ProtoGAN: Towards Few Shot Learning for Action Recognition
  アクション認識のための少ショット学習(FSL)は、トレーニングデータ内のいくつかのインスタンスで表される新しいアクションカテゴリを認識するという難しいタスクです。より一般化されたFSL設定(G-FSL)では、新しいアクションカテゴリだけでなく見られたものも認識される必要があります。従来の分類器は、FSL設定でのデータが不十分であり、G-FSL設定で見られたアクションカテゴリに対する固有のバイアスのために苦しみます。この論文では、条件付きの生成的敵対ネットワークをクラスプロトタイプベクトルで条件付けすることにより、新規カテゴリの追加例を合成する新規ProtoGANフレームワークを提案することにより、この問題に対処します。これらのクラスプロトタイプベクトルは、見られたカテゴリの例からクラスプロトタイプ転送ネットワーク(CPTN)を使用して学習されます。新規クラスの合成例は、そのクラスに属する実際の例と意味的に類似しており、新規クラスに対してより一般化されたモデルのトレーニングに使用されます。 UCF101、HMDB51、Olympic-Sportsの3つのデータセットで大規模な実験を行うことで、この主張を支持しています。私たちの知る限り、G-FSLの結果を最初に報告し、将来の研究の強力なベンチマークを提供します。また、前述のすべてのデータセットについて、FSLの最先端の方法よりも優れています。
Few-shot learning (FSL) for action recognition is a challenging task of recognizing novel action categories which are represented by few instances in the training data. In a more generalized FSL setting (G-FSL), both seen as well as novel action categories need to be recognized. Conventional classifiers suffer due to inadequate data in FSL setting and inherent bias towards seen action categories in G-FSL setting. In this paper, we address this problem by proposing a novel ProtoGAN framework which synthesizes additional examples for novel categories by conditioning a conditional generative adversarial network with class prototype vectors. These class prototype vectors are learnt using a Class Prototype Transfer Network (CPTN) from examples of seen categories. Our synthesized examples for a novel class are semantically similar to real examples belonging to that class and is used to train a model exhibiting better generalization towards novel classes. We support our claim by performing extensive experiments on three datasets: UCF101, HMDB51 and Olympic-Sports. To the best of our knowledge, we are the first to report the results for G-FSL and provide a strong benchmark for future research. We also outperform the state-of-the-art method in FSL for all the aforementioned datasets.
updated: Tue Sep 17 2019 17:28:20 GMT+0000 (UTC)
published: Tue Sep 17 2019 17:28:20 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト