arXiv reaDer
ノイズが強化された教師ありオートエンコーダによるクロスドメイン数ショット学習の一般化機能の強化
Boosting the Generalization Capability in Cross-Domain Few-shot Learning via Noise-enhanced Supervised Autoencoder
最先端の(SOTA)少数ショット学習(FSL)メソッドは、ソースデータセットとターゲットデータセットの間にドメインの違いがあると、パフォーマンスが大幅に低下します。ソースデータセットの強力な識別能力は、必ずしもターゲットデータセットの高い分類精度につながるとは限りません。この作業では、モデルの一般化機能を強化することにより、このクロスドメイン数ショット学習(CDFSL)の問題に対処します。具体的には、新しいノイズ強化教師ありオートエンコーダ(NSAE)を使用して、特徴分布の幅広いバリエーションをキャプチャするようにモデルを教えます。 NSAEは、入力を共同で再構築し、入力のラベルとそれらの再構築されたペアを予測することにより、モデルをトレーニングします。クラス内相関(ICC)に基づく理論的分析は、NSAEから学習した機能の埋め込みが、ターゲットドメインでより強力な識別能力と一般化能力を持っていることを示しています。また、NSAE構造を利用して、より良い適応を実現し、ターゲットドメインでの分類パフォーマンスを向上させる2段階の微調整手順を提案します。提案された方法の有効性を実証するために、広範な実験とアブレーション研究が行われている。実験結果は、我々の提案した方法が様々な条件下で一貫してSOTA方法を上回っていることを示している。
State of the art (SOTA) few-shot learning (FSL) methods suffer significant performance drop in the presence of domain differences between source and target datasets. The strong discrimination ability on the source dataset does not necessarily translate to high classification accuracy on the target dataset. In this work, we address this cross-domain few-shot learning (CDFSL) problem by boosting the generalization capability of the model. Specifically, we teach the model to capture broader variations of the feature distributions with a novel noise-enhanced supervised autoencoder (NSAE). NSAE trains the model by jointly reconstructing inputs and predicting the labels of inputs as well as their reconstructed pairs. Theoretical analysis based on intra-class correlation (ICC) shows that the feature embeddings learned from NSAE have stronger discrimination and generalization abilities in the target domain. We also take advantage of NSAE structure and propose a two-step fine-tuning procedure that achieves better adaption and improves classification performance in the target domain. Extensive experiments and ablation studies are conducted to demonstrate the effectiveness of the proposed method. Experimental results show that our proposed method consistently outperforms SOTA methods under various conditions.
updated: Wed Aug 11 2021 04:45:56 GMT+0000 (UTC)
published: Wed Aug 11 2021 04:45:56 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト