arXiv reaDer
複数のセマンティクスを使用した少数ショット学習に向けたベビーステップ
Baby steps towards few-shot learning with multiple semantics
 1つまたはいくつかの視覚的な例から学ぶことは、幼児期から人間の重要な能力の1つですが、現代のAIシステムにとっては依然として大きな課題です。いくつかの画像例からの少数ショット学習ではかなりの進歩が達成されましたが、乳児に新しいオブジェクトが提示されたときに通常提供される言葉による説明にはあまり注意が払われていません。このホワイトペーパーでは、数発の視覚学習を大幅に促進できる追加のセマンティクスの役割に注目します。追加のセマンティック情報を使用した少数ショット学習の最近の進歩に基づいて、複数のより豊富なセマンティクス(カテゴリラベル、属性、および自然言語記述)を組み合わせることにより、さらなる改善が可能であることを実証します。これらのアイデアを使用して、人気のあるminiImageNetとCUBの数ショットベンチマークでコミュニティに新しい結果を提供します。これは、視覚のみのアプローチと視覚とセマンティクスベースのアプローチの両方について、以前の最先端の結果と比較して有利です。また、アプローチのコンポーネントと設計の選択肢を調査するアブレーション研究も実施しました。
Learning from one or few visual examples is one of the key capabilities of humans since early infancy, but is still a significant challenge for modern AI systems. While considerable progress has been achieved in few-shot learning from a few image examples, much less attention has been given to the verbal descriptions that are usually provided to infants when they are presented with a new object. In this paper, we focus on the role of additional semantics that can significantly facilitate few-shot visual learning. Building upon recent advances in few-shot learning with additional semantic information, we demonstrate that further improvements are possible by combining multiple and richer semantics (category labels, attributes, and natural language descriptions). Using these ideas, we offer the community new results on the popular miniImageNet and CUB few-shot benchmarks, comparing favorably to the previous state-of-the-art results for both visual only and visual plus semantics-based approaches. We also performed an ablation study investigating the components and design choices of our approach.
updated: Wed Jan 22 2020 12:11:47 GMT+0000 (UTC)
published: Wed Jun 05 2019 09:28:59 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト