摘要
arXiv:2309.06129v4 宣告类型:更换交叉引用
摘要:深度学习增强了眼球跟踪技术,但由于训练数据集不足,实际部署受到了阻碍。这个问题在摄像头硬件引起的图像变异和被记录参与者固有的生物差异上被进一步加剧,导致在特定数据集上训练的模型在特征和像素层面的差异,从而削弱了模型的泛化能力。虽然合成数据集可以是一个解决方案,但其创建需要大量的时间和资源。为了解决这个问题,我们提出了一种称为Light Eyes或“LEyes”的框架,与传统的逼真方法不同,LEyes仅使用简单的光照分布对用于视频眼球跟踪所需的关键图像特征进行建模。LEyes允许用户轻松配置,以训练针对各种眼球估计任务的神经网络。我们展示了使用LEyes训练的模型在知名数据集上的瞳孔和CR定位表现与最先进的算法一致或优于其他方法。此外,使用LEyes训练的模型在使用显著更低成本的硬件时,其性能优于行业标准的眼球跟踪器。未来,我们有信心LEyes将 revolutionize 眼球估计模型的合成数据生成,并导致下一代基于视频的眼球跟踪器的重大改进。