时间序列挖掘（TSM）是一个重要的研究领域，因为它在实际应用中展现出巨大的潜力。依赖于大量标记数据的深度学习模型已成功应用于TSM。然而，由于数据标注成本，构建大规模的良好标记数据集非常困难。近年来，预训练模型由于其在计算机视觉和自然语言处理领域的出色表现，逐渐引起了时间序列领域的关注。在本综述中，我们对时间序列预训练模型（TS-PTMs）进行了全面综述，旨在指导对TS-PTMs的理解、应用和研究。具体而言，我们首先简要介绍了TSM中常用的典型深度学习模型。然后，我们根据预训练技术概述了TS-PTMs。我们探讨的主要类别包括监督、无监督和自监督TS-PTMs。此外，我们还进行了涉及27种方法、434个数据集和679个迁移学习场景的大量实验，以分析迁移学习策略、基于Transformer的模型和代表性TS-PTMs的优缺点。最后，我们指出了TS-PTMs未来工作的一些潜在方向。