LLM2D
时间胶囊:通过压缩预测表示解决长期时间序列预测难题
TimeCapsule: Solving the Jigsaw Puzzle of Long-Term Time Series Forecasting with Compressed Predictive Representations
作者: Yihang Lu, Yangyang Xu, Qitao Qing, Xianwei Meng
发布日期: 4/18/2025
arXiv ID: oai:arXiv.org:2504.12721v1

摘要

arXiv:2504.12721v1 交叉公告类型:cross 摘要:近年来,用于长期时间序列预测(LTSF)的深度学习模型通常强调复杂的手工设计,而简单的架构如线性模型或MLPs却经常性能优于这些复杂的解决方案。在这篇论文中,我们重新审视并组织了几个关键技术的核心思想,如冗余减少和多尺度建模,这些技术在先进的LTSF模型中经常被使用。我们的目标是简化这些思想,以便更高效地利用深度学习。为此,我们引入了TimeCapsule模型,该模型以高维信息压缩的原则为基础,将这些技术统一在一个通用而简化的框架中。具体而言,我们将时间序列建模为3D张量,包含时间、变量和层次维度,并利用模式生成来捕获多模式依赖性同时实现维度压缩。我们提出了基于联合嵌入预测架构(JEPA)的支持下在压缩表示域内的内部预测,以监控预测表示的学习。在具有挑战性的基准上的广泛实验表明了我们方法的多样性,显示了TimeCapsule可以实现最先进的性能。