畳み込みニューラルネットワーク(CNN)は、過去10年間で画像分類の最先端の方法になりました。多くの一般的なデータセットで超人的な分類精度を達成しているという事実にもかかわらず、より抽象的な画像分類タスクではパフォーマンスが大幅に低下することがよくあります。これらの困難なタスクが認知心理学からのリレーショナル概念にリンクされていること、および過去数年間の進歩にもかかわらず、そのようなリレーショナル推論タスクが現在のニューラルネットワークアーキテクチャでは依然として困難であることを示します。もともとこの角度から提示されていなかったとしても、リレーショナル概念学習に関連する深層学習研究をレビューします。現在の文献を検討して、何らかの形の注意が、リレーショナルタスクを解決するための将来のシステムの重要な要素になると主張します。さらに、現在使用されているデータセットの欠点を指摘し、将来のデータセットをリレーショナル推論のテストシステムにより関連性のあるものにするための手順を推奨します。
Convolutional Neural Networks (CNNs) have become the state of the art method for image classification in the last ten years. Despite the fact that they achieve superhuman classification accuracy on many popular datasets, they often perform much worse on more abstract image classification tasks. We will show that these difficult tasks are linked to relational concepts from cognitive psychology and that despite progress over the last few years, such relational reasoning tasks still remain difficult for current neural network architectures. We will review deep learning research that is linked to relational concept learning, even if it was not originally presented from this angle. Reviewing the current literature, we will argue that some form of attention will be an important component of future systems to solve relational tasks. In addition, we will point out the shortcomings of currently used datasets, and we will recommend steps to make future datasets more relevant for testing systems on relational reasoning.