LLM2D
CASA: 基于CNN自编码器的评分注意力机制以实现高效多元长期时间序列预测
CASA: CNN Autoencoder-based Score Attention for Efficient Multivariate Long-term Time-series Forecasting
作者: Minhyuk Lee, HyeKyung Yoon, MyungJoo Kang
发布日期: 5/6/2025
arXiv ID: oai:arXiv.org:2505.02011v1

摘要

arXiv:2505.02011v1 类型: cross 摘要: 多变量长期时间序列预测在天气预报和交通分析等应用中至关重要。此外,Transformer 变体的实现提高了预测准确性。遵循这些变体,不同的输入数据分析方法也增强了该领域,例如包括点、通道和块的归一化技术。然而,先前的研究仍然在时间复杂性、计算资源以及跨维度交互方面存在局限性。为了应对这些局限性,我们提出了一种新的基于CNN自动编码器的得分注意力机制(CASA),该机制可以以减少内存的方式在任何Transformer模型中引入,并提高模型性能。在八个实际数据集上的实验验证了CASA可以将计算资源降低至最多77.7%,将推理加速44.0%,并达到了最先进的性能,评估指标中有87.5%排名第一。