链式思维（CoT）提示是一种简单有效的方法，可以提高大型语言模型（LLM）的推理能力。CoT的基本思想是通过在输入提示中添加示例，让LLM逐步分解其思维过程。然而，CoT密集结构的提示示例可能会导致LLM的认知超载。受人类认知的启发，我们引入了COT-SEP，这是一种在CoT提示中每个示例末尾策略性地使用分隔符的方法。这些分隔符旨在帮助LLM在推理过程中更好地理解其思维过程。有趣的是，与不使用分隔符的普通CoT相比，COT-SEP显著提高了LLM在复杂推理任务（例如GSM8K、AQuA、CSQA）上的性能。我们还研究了在包括GPT-3.5-Turbo、GPT-4和LLaMA-2 7B在内的多个LLM上测试的分隔符类型和位置的影响。