arXiv reaDer
少数ショット学習のためのハイブリッドグラフニューラルネットワーク
Hybrid Graph Neural Networks for Few-Shot Learning
グラフニューラルネットワーク(GNN)は、数ショット学習(FSL)の問題に取り組むために使用されており、トランスダクティブ設定の下で大きな可能性を示しています。ただし、帰納的設定では、既存のGNNベースの方法の競争力は低くなります。これは、インスタンスGNNをラベル伝播/分類モジュールとして使用しているためです。このモジュールは、機能埋め込みネットワークと共同でメタ学習されます。埋め込みではなく、分類器が新しいタスクに迅速に適応する必要があるため、この設計には問題があります。この問題を克服するために、この論文では、2つのGNN、インスタンスGNNとプロトタイプGNNで構成される新しいハイブリッドGNN(HGNN)モデルを提案します。ラベル伝播の代わりに、それらは、メタ学習された特徴埋め込みを新しいタスクに迅速に適応させるための特徴埋め込み適応モジュールとして機能します。重要なのは、FSLで基本的でありながら無視されることが多い課題に対処するように設計されていることです。つまり、クラスごとにほんの一握りのショットしかない場合、数ショットの分類器は、外れ値であるか、クラス間を引き起こす可能性のある、不適切にサンプリングされたショットに敏感になります。分布が重なっています。 %私たちの2つのGNNは、これら2つのタイプの不十分にサンプリングされた数ショットにそれぞれ対処するように設計されており、それらの相補性はハイブリッドGNNモデルで活用されます。広範な実験により、HGNNは3つのFSLベンチマークで新しい最先端技術を取得していることが示されています。
Graph neural networks (GNNs) have been used to tackle the few-shot learning (FSL) problem and shown great potentials under the transductive setting. However under the inductive setting, existing GNN based methods are less competitive. This is because they use an instance GNN as a label propagation/classification module, which is jointly meta-learned with a feature embedding network. This design is problematic because the classifier needs to adapt quickly to new tasks while the embedding does not. To overcome this problem, in this paper we propose a novel hybrid GNN (HGNN) model consisting of two GNNs, an instance GNN and a prototype GNN. Instead of label propagation, they act as feature embedding adaptation modules for quick adaptation of the meta-learned feature embedding to new tasks. Importantly they are designed to deal with a fundamental yet often neglected challenge in FSL, that is, with only a handful of shots per class, any few-shot classifier would be sensitive to badly sampled shots which are either outliers or can cause inter-class distribution overlapping. %Our two GNNs are designed to address these two types of poorly sampled few-shots respectively and their complementarity is exploited in the hybrid GNN model. Extensive experiments show that our HGNN obtains new state-of-the-art on three FSL benchmarks.
updated: Mon Dec 13 2021 10:20:15 GMT+0000 (UTC)
published: Mon Dec 13 2021 10:20:15 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト