物体の形状についての推論が物体認識にとって重要であることは広く受け入れられています。ただし、今日の最も強力なオブジェクト認識方法では、学習中にオブジェクトの形状を明示的に利用していません。この作業では、ローショット学習の最近の開発、発達心理学の発見、およびコンピュータービジョン研究での合成データの使用の増加に動機付けられて、3D形状に関する推論を使用してローショット学習方法の一般化を改善する方法を調査します。パフォーマンス。 3Dオブジェクト形状を使用して識別可能な埋め込み空間を学習し、画像をそれにマッピングする方法を学習することでこの埋め込みを使用することにより、既存のローショット学習アプローチを改善する新しい方法を提案します。私たちの新しいアプローチは、複数のデータセットでの画像のみのローショット学習アプローチのパフォーマンスを向上させます。また、現在利用可能なオブジェクトカテゴリの数が最も多い3DオブジェクトデータセットであるToys4Kを紹介します。これは、ローショット学習をサポートします。
It is widely accepted that reasoning about object shape is important for object recognition. However, the most powerful object recognition methods today do not explicitly make use of object shape during learning. In this work, motivated by recent developments in low-shot learning, findings in developmental psychology, and the increased use of synthetic data in computer vision research, we investigate how reasoning about 3D shape can be used to improve low-shot learning methods' generalization performance. We propose a new way to improve existing low-shot learning approaches by learning a discriminative embedding space using 3D object shape, and using this embedding by learning how to map images into it. Our new approach improves the performance of image-only low-shot learning approaches on multiple datasets. We also introduce Toys4K, a 3D object dataset with the largest number of object categories currently available, which supports low-shot learning.