少数のショット学習(FSL)アルゴリズムは、ほんの一握りのラベル付きデータを使用して、新しい概念の学習において大幅な進歩を遂げました。テスト時に遭遇した新しいクラスからクエリインスタンスを分類するには、いくつかのラベル付きサンプルで構成されるサポートセットのみが必要です。 FSLベンチマークは通常、これらのクエリがサポートセットのインスタンスと同じディストリビューションからのものであると想定しています。ただし、現実的な設定では、データ配布はおそらく変更される可能性があります。これは、配布シフト(DS)と呼ばれる状況です。現在の作業は、サポート/クエリシフト(FSQS)での少数ショット学習の新しく困難な問題、つまり、サポートインスタンスとクエリインスタンスが関連しているが異なるディストリビューションからサンプリングされる場合に対処します。私たちの貢献は次のとおりです。まず、データセット、関連するベースライン、および厳密で再現性のある評価のためのプロトコルを含む、FSQSのテストベッドをリリースします。第二に、確立されたFSLアルゴリズムは、当然のことながらFSQSに直面したときに精度が大幅に低下することを観察し、私たちの研究の重要性を強調しています。最後に、トランスダクティブアルゴリズムがDSの不適切な影響を制限できることを示します。特に、教師なしドメイン適応とFSLの橋渡しをする、分布の調整におけるバッチ正規化と最適トランスポート(OT)の両方の役割を研究します。これにより、OTと有名なプロトタイプネットワークを効率的に組み合わせる新しい方法が生まれます。私たちは、私たちの方法の利点を実証する説得力のある実験をもたらします。私たちの仕事は、テストベッドと強力なベースラインを提供することにより、刺激的な研究ラインを開きます。私たちのコードはhttps://github.com/ebennequin/meta-domain-shiftで入手できます。
Few-Shot Learning (FSL) algorithms have made substantial progress in learning novel concepts with just a handful of labelled data. To classify query instances from novel classes encountered at test-time, they only require a support set composed of a few labelled samples. FSL benchmarks commonly assume that those queries come from the same distribution as instances in the support set. However, in a realistic set-ting, data distribution is plausibly subject to change, a situation referred to as Distribution Shift (DS). The present work addresses the new and challenging problem of Few-Shot Learning under Support/Query Shift (FSQS) i.e., when support and query instances are sampled from related but different distributions. Our contributions are the following. First, we release a testbed for FSQS, including datasets, relevant baselines and a protocol for a rigorous and reproducible evaluation. Second, we observe that well-established FSL algorithms unsurprisingly suffer from a considerable drop in accuracy when facing FSQS, stressing the significance of our study. Finally, we show that transductive algorithms can limit the inopportune effect of DS. In particular, we study both the role of Batch-Normalization and Optimal Transport (OT) in aligning distributions, bridging Unsupervised Domain Adaptation with FSL. This results in a new method that efficiently combines OT with the celebrated Prototypical Networks. We bring compelling experiments demonstrating the advantage of our method. Our work opens an exciting line of research by providing a testbed and strong baselines. Our code is available at https://github.com/ebennequin/meta-domain-shift.