オブジェクトベースの注意は、視覚システムの重要な構成要素であり、知覚、学習、および記憶に関連しています。有人オブジェクトの機能に同調したニューロンは、非アテンダント オブジェクトに関連付けられているニューロンよりもアクティブになる傾向があります。計算論的神経科学には、この現象の豊富なモデルがあります。ただし、現在、生理学的データとうまく一致するモデルと、コンピューター ビジョンで使用される非常に単純な問題と注意のモデルしか処理できないモデルとの間には分裂があります。たとえば、脳の注意はトップダウン処理に依存していることが知られていますが、深層学習における自己注意はそうではありません。ここでは、注意がトップダウンであり、再帰的である方法をキャプチャするオブジェクト ベースの注意の人工ニューラル ネットワーク モデルを提案します。私たちのアテンション モデルは、手書きの数字の画像を使用するような単純なテスト刺激と、COCO データセットから描画された自然な画像などのより複雑な刺激の両方でうまく機能します。私たちのモデルは、注意不変の調整、復帰の抑制、および注意を介した活動のスケーリングなど、神経科学からのさまざまな発見を再現していることがわかります。オブジェクト ベースの注意を理解することは、計算論的に興味深く、計算論的神経科学にとって重要な問題です。
Object-based attention is a key component of the visual system, relevant for perception, learning, and memory. Neurons tuned to features of attended objects tend to be more active than those associated with non-attended objects. There is a rich set of models of this phenomenon in computational neuroscience. However, there is currently a divide between models that successfully match physiological data but can only deal with extremely simple problems and models of attention used in computer vision. For example, attention in the brain is known to depend on top-down processing, whereas self-attention in deep learning does not. Here, we propose an artificial neural network model of object-based attention that captures the way in which attention is both top-down and recurrent. Our attention model works well both on simple test stimuli, such as those using images of handwritten digits, and on more complex stimuli, such as natural images drawn from the COCO dataset. We find that our model replicates a range of findings from neuroscience, including attention-invariant tuning, inhibition of return, and attention-mediated scaling of activity. Understanding object based attention is both computationally interesting and a key problem for computational neuroscience.