专利申请中专利权利要求的自动改进对于知识产权战略至关重要。本文提出了一种用于自动改进专利权利要求的新框架ClaimBrush，该框架包括一个数据集和一个重写模型。我们通过收集专利审查过程中大量的实际专利权利要求重写案例，构建了一个用于训练和评估专利权利要求重写模型的数据集。利用构建的数据集，我们通过微调大型语言模型构建了一个自动专利权利要求重写模型。此外，我们通过基于专利审查员办公行为预测模型的偏好优化，提高了自动专利权利要求重写模型的性能。实验结果表明，我们提出的重写模型优于启发式基线和最先进大型语言模型中的零样本学习。此外，基于专利审查员偏好的偏好优化提高了专利权利要求改进的性能。