arXiv:2501.17176v2 宣告类型: 替换-交叉 摘要：由于大型语言模型（LLMs）的出现，实现师生比1:1的梦想比以往任何时候都更近。这些模型在教育领域的潜在应用之一是为大学生的编程入门课程提供反馈，以便遇到基本实现问题的学生可以寻求24/7可用的语言模型的帮助。本文侧重于研究这种应用相关的三个方面。首先，评估了两个著名模型GPT-3.5T和GPT-4T在为学生提供反馈方面的性能。实验证明GPT-4T的表现远远优于GPT-3.5T，然而尚不适用于实际情境。这是因为生成错误信息的可能性，这些潜在用户可能无法总能检测到。其次，文章提出了一种精心设计的提示，利用上下文学习技术，能够自动化评估过程中的重要部分，并提供反馈中包含错误信息比例的下限，从而节省时间和精力。这得益于生成的反馈具有可程序化分析的结构，整合了语言模型在解决请求任务方面表现的诊断信息。第三，文章还建议了一种基于语言模型的实用学习工具的实施策略，该策略根植于提出的提示技术。这种方法从教育角度来看，开启了大量有趣的可能性。