LLM2D
ClimateLLM:通过频率意识大型语言模型的高效天气预报
ClimateLLM: Efficient Weather Forecasting via Frequency-Aware Large Language Models
作者: Shixuan Li, Wei Yang, Peiyu Zhang, Xiongye Xiao, Defu Cao, Yuehan Qin, Xiaole Zhang, Yue Zhao, Paul Bogdan
发布日期: 2/18/2025
arXiv ID: oai:arXiv.org:2502.11059v1

摘要

arXiv:2502.11059v1 通告类型: cross 摘要:天气预报对于公共安全、灾害预防与缓解、农业生产和能源管理具有全球重要意义。尽管深度学习显著推进了天气预测,当前的方法仍然面临着重大限制:(i)它们往往难以捕捉动态的时间依赖关系和短期的突变变化,使得极端天气建模变得困难;(ii)由于广泛的训练和资源需求导致计算成本高昂;(iii)它们对多尺度频率的适应性有限,导致在分离全球趋势与本地波动时遇到挑战。为了解决这些问题,我们提出了ClimateLLM,一种用于天气预报的基础模型。它通过融合基于傅里叶变换的频率分解与大型语言模型(LLMs)来强化时空建模,采用时空协作建模框架捕捉时空依赖关系。我们的框架利用了一种门控专家(MoE)机制,能够适应性地处理不同的频率成分,从而有效地处理全球信号和局部极端事件。此外,我们还引入了一种时空动态提示机制,使LLMs能够有效地跨多尺度整合气象模式。在现实世界数据集上的广泛实验表明,ClimateLLM 在准确性和效率方面均优于现有方法,是一种适用于全球天气预报的可扩展解决方案。