摘要
arXiv:2502.12226v2 公告类型: 替换-交叉
摘要:基础模型(FMs)已经在诸如金融等多个领域改进了时间序列预测,但它们对输入干扰的脆弱性可能妨碍其在投资者和分析师等利益相关者中的采用。为解决这一问题,我们提出了一种因果性指导的评估框架,以研究基础模型在时间序列(FMTS)中的鲁棒性,特别是在面对输入扰动时。我们将我们的方法应用到股票价格预测问题上,这是已广泛研究并有易获取公开数据的问题,我们评估了六个最先进的(包括多模态模型)FMTS在三个行业中六家著名公司的表现。我们框架提出的评分有效地评估了FMTS的鲁棒性,并且也提供了模型选择和部署的可操作见解。在我们研究的范围内,我们发现:
(1) 多模态FMTS在鲁棒性和准确性方面优于其单模态版本;
(2) 预训练于时间序列预测任务的FMTS在鲁棒性和预测准确性方面优于在多种环境下预训练的一般目的FMTS。
为进一步验证我们框架的可用性,我们进行了用户研究,展示了FMTS的预测误差以及我们计算出的评分。研究证实,我们的评分减少了用户比较不同系统鲁棒性的难度。