構成的ゼロショット学習 (CZSL) は、既知の視覚プリミティブの目に見えない構成を認識することを指します。これは、人工知能システムが世界を学習して理解するために不可欠な能力です。既存のベンチマークではかなりの進歩がありましたが、一般的な CZSL メソッドが、実世界の目に見えない環境で学習するときに一般的な少数ショットおよび少数の参照構成の課題に対処できるかどうかは疑問です。この目的のために、この論文では挑戦的な参照制限合成ゼロショット学習 (RL-CZSL) 問題を研究します。不十分な参照情報から構成性を効率的に学習し、目に見えない構成に一般化できる新しいメタ構成グラフ学習器 (MetaCGL) を提案します。さらに、さまざまな構成ラベルを持つ自然画像で構成される 2 つの新しい大規模データセットを使用してベンチマークを構築し、RL-CZSL により現実的な環境を提供します。ベンチマークでの広範な実験は、構成学習の参照が制限されている場合に、目に見えない構成を認識する際に、私たちの方法が最先端のパフォーマンスを達成することを示しています。
Compositional zero-shot learning (CZSL) refers to recognizing unseen compositions of known visual primitives, which is an essential ability for artificial intelligence systems to learn and understand the world. While considerable progress has been made on existing benchmarks, we suspect whether popular CZSL methods can address the challenges of few-shot and few referential compositions, which is common when learning in real-world unseen environments. To this end, we study the challenging reference-limited compositional zero-shot learning (RL-CZSL) problem in this paper, i.e. , given limited seen compositions that contain only a few samples as reference, unseen compositions of observed primitives should be identified. We propose a novel Meta Compositional Graph Learner (MetaCGL) that can efficiently learn the compositionality from insufficient referential information and generalize to unseen compositions. Besides, we build a benchmark with two new large-scale datasets that consist of natural images with diverse compositional labels, providing more realistic environments for RL-CZSL. Extensive experiments in the benchmarks show that our method achieves state-of-the-art performance in recognizing unseen compositions when reference is limited for compositional learning.