arXiv:2410.01531v2 宣告类型: replace-cross 摘要: 多变量时间序列（MTS）的预测在各个领域都至关重要，但由于需要同时建模时间和变量间的依赖关系，这一任务仍然具有挑战性。现有的频道依赖模型，其中基于Transformer的模型占主导地位，分别处理这些依赖关系，限制了它们捕获诸如领前滞后动态等复杂相互作用的能力。为了解决这一问题，我们提出了一种新颖的架构——TiVaT（时变Transformer），它包括一个单一的联合模块——联合轴（JA）注意力模块，该模块可以同时处理时间和变量建模。JA注意力模块动态选择相关特征，特别是用于捕获异步交互。此外，我们还在JA注意力中引入了距离感知的时间变量采样，这是一种新颖的机制，通过学习到的2D嵌入空间提取显著模式，同时减少噪声。广泛的实验表明，TiVaT在不同数据集上整体性能优越，特别在复杂异步依赖的情境中表现出色。