摘要
近年来,大型语言模型(LLMs)在时间序列分析中展现了巨大的潜力,通过捕捉复杂的依赖关系并提升预测性能。然而,现有方法在模态对齐方面往往表现不佳,导致结果不尽如人意。为应对这些挑战,我们提出了一种新颖的框架——TS-TCD,该框架引入了一个全面的三层跨模态知识蒸馏机制。与以往专注于孤立对齐技术的工作不同,我们的框架系统地整合了以下内容:1)动态自适应门控用于输入编码和对齐,确保时间序列令牌与QR分解的文本嵌入之间的一致性对齐;2)层级对比学习,对齐模态间的中间表示以减少特征层面的差异;3)最优传输驱动的输出对齐,通过细粒度的跨模态对齐确保一致的输出预测。在基准时间序列数据集上的广泛实验表明,TS-TCD达到了最先进的水平,在准确性和鲁棒性方面均优于传统方法。