arXiv:2406.01638v5 宣告类型: 替换-交叉 摘要: 多变量时间序列预测（MTSF）旨在通过学习变量之间的时序动态来预测未来的时间序列。现有的统计和基于深度学习的方法由于可学习参数有限和训练数据规模较小而受到限制。最近，结合时间序列与文本提示的大型语言模型（LLMs）在MTSF中取得了令人瞩目的性能。然而，我们发现当前基于LLM的解决方案在学习分离嵌入方面存在不足。我们介绍了一种名为TimeCMA的直观且有效的框架，用于通过跨模态对齐进行MTSF。具体来说，我们提出了双模态编码，具有两个分支：时间序列编码分支提取分离但较弱的时间序列嵌入，而LLM赋能的编码分支则通过文本作为提示将相同的时间序列包裹起来，以获得缠结但稳健的提示嵌入。结果，这种跨模态对齐从时间序列和提示模态的相似性出发，从提示嵌入中检索出既分离又稳健的时间序列嵌入，“两全其美”。作为另一个关键设计，为了减少时间序列及其长度文本提示的计算成本，我们设计了一个有效的提示，以鼓励在最后的标记中封装最重要的时序信息：只有最后的标记传递给下游预测。我们进一步存储最后的标记嵌入以加速推理速度。在八个真实数据集上的广泛实验表明，TimeCMA超越了现有最佳方法。