摘要
arXiv:2505.00887v1 宣告类型: cross
摘要: 有效地建模时间信息并将这些信息融入涉及时间顺序事件的应用或模型中是至关重要的。现实世界中的场景通常涉及多样化且复杂的时序模式,这对时间编码方法提出了重大挑战。尽管之前的方法侧重于捕捉时间模式,但很多方法依赖于特定的归纳偏见,例如使用三角函数来建模周期性。这种对单一模式建模的狭窄关注使它们在处理现实世界时间模式的多样性和复杂性方面效果较差。在本文中,我们研究了如何改进现有的常用时间编码方法,并引入了可学习转换为基础的广义时间编码(LeTE)。我们提出使用深度函数学习技术来参数化时间编码中的非线性转换,使其成为可学习的,并能建模包括多样性和复杂性在内的广义时间模式,包括各种复杂的时序动态。通过使转换可学习,LeTE 包含了之前的方法作为特殊案例,并允许无缝集成到广泛的任务中。通过在不同领域的广泛实验,我们展示了 LeTE 的多功能性和有效性。