摘要
我们所遇到的物体在与之交互时往往会改变外观。光照(阴影)、物体姿态或非刚性物体的运动都会极大地改变可用的图像特征。生物视觉系统是如何在物体改变时跟踪它们的?这可能涉及到特定的注意力机制,用于推理物体的空间位置,而与它们的外观无关——这种能力与神经同步计算相关,并且得到了神经科学领域杰出理论的支持。我们通过计算方法检验了这样一个假设:通过神经同步实现的视觉注意力是生物视觉系统跟踪随时间变化外观的物体能力的基础。我们首先介绍了一种新型深度学习电路,它可以通过神经同步来学习精确地控制对特征的注意力,而与它们在世界中的位置无关:复值循环神经网络(CV-RNN)。接下来,我们使用 FeatureTracker 对人类、CV-RNN 和其他深度神经网络(DNN)进行物体跟踪比较。FeatureTracker 是一项大规模挑战,要求观察者在精确控制的条件下,跟踪物体的位置和外观发生变化。虽然人类毫不费力地解决了 FeatureTracker,但最先进的 DNN 却无法做到。相比之下,我们的 CV-RNN 在这项挑战中表现与人类类似,为相位同步作为跟踪外观变化物体运动的神经基质提供了计算上的概念证明。