预测天气和气候事件对于采取适当措施减轻环境危害和最大限度地减少相关损失至关重要。以往的环境预测研究侧重于预测与封闭集事件相关的数值气象变量，而不是直接预测开放集事件，这限制了事件预测的全面性。我们提出了天气和气候事件预测（WCEF），一项利用气象栅格数据和文本事件数据来预测潜在天气和气候事件的新任务。然而，由于多模态数据对齐的困难以及缺乏足够的监督数据集，这项任务难以完成。因此，我们首先提出了一种框架，使用大型语言模型（LLM）将历史气象数据与过去的天气和气候事件对齐。在这个框架中，我们使用LLM从超过41,000篇高度关注环境的新闻文章语料库中提取有关天气和气候事件的信息，构建知识图谱。随后，我们将这些事件与气象栅格数据进行映射，创建了一个监督数据集，这是针对WCEF任务进行LLM调优的最大且最具新颖性的数据集。最后，我们介绍了我们对齐的模型，CLLMate（气候LLM），一种多模态LLM，用于利用气象栅格数据预测天气和气候事件。在评估CLLMate时，我们进行了广泛的实验。结果表明，CLLMate超越了基线和其他多模态LLM，展示了利用LLM将天气和气候事件与气象数据对齐的潜力，并突出了WCEF任务研究的光明未来。