本論文では、実物を数えることができる新しいニューロロボティクスモデルを紹介します。このモデルにより、具体化と数学的認知の間の相互作用を調査することができます。これは、画像処理とシーケンシャルタスクのパフォーマンスが可能なディープニューラルネットワークと、その実施形態を提供するロボットプラットフォームであるiCubヒューマノイドロボットで構成されています。ネットワークは、ロボットのカメラからの画像とその関節からの固有受容信号を使用してトレーニングされます。訓練されたモデルは、アイテムのセットを数えると同時に、それらを指すことができます。ポインティングがカウントプロセスに与える影響を調査し、その結果を子供を対象とした研究の結果と比較します。このホワイトペーパーでは、いくつかのトレーニングアプローチを紹介します。これらはすべて、トレーニングをカウントする前に、ネットワークがポインティングと番号の朗読(1から10)の機能を取得できるようにする事前トレーニングルーチンを使用します。カウントされたセットサイズとオブジェクトまでの距離の影響が調査されます。得られたパフォーマンスのカウント結果は、人間の研究から得られた結果と類似していることを示しています。
In this paper, a novel neuro-robotics model capable of counting real items is introduced. The model allows us to investigate the interaction between embodiment and numerical cognition. This is composed of a deep neural network capable of image processing and sequential tasks performance, and a robotic platform providing the embodiment - the iCub humanoid robot. The network is trained using images from the robot's cameras and proprioceptive signals from its joints. The trained model is able to count a set of items and at the same time points to them. We investigate the influence of pointing on the counting process and compare our results with those from studies with children. Several training approaches are presented in this paper all of them uses pre-training routine allowing the network to gain the ability of pointing and number recitation (from 1 to 10) prior to counting training. The impact of the counted set size and distance to the objects are investigated. The obtained results on counting performance show similarities with those from human studies.