LLM2D
由双通道难度驱动的LLM有效知识追踪
LLM-driven Effective Knowledge Tracing by Integrating Dual-channel Difficulty
作者: Jiahui Cen, Jianghao Lin, Weixuan Zhong, Dong Zhou, Jin Chen, Aimin Yang, Yongmei Zhou
发布日期: 5/1/2025
arXiv ID: oai:arXiv.org:2502.19915v2

摘要

arXiv:2502.19915v2 公告类型: 替换 摘要:知识追踪(KT)是一种在智能辅导系统中用于模拟学习过程中学生知识状态变化、跟踪个性化知识掌握情况以及预测表现的基本技术。然而,当前的KT模型面临着三大主要挑战:(1)当遇到新问题时,由于交互记录稀疏,模型会遇到冷启动问题,使得精确建模变得困难;(2)传统的模型仅使用历史交互记录进行个性化建模,无法准确跟踪个人掌握水平,导致个性化的建模不够清晰;(3)决策过程对教育者来说是透明的,使得他们难以理解模型的判断。为了解决这些挑战,我们提出了一种新颖的双向难度感知知识追踪(DDKT)框架,该框架利用大型语言模型(LLMs)和检索增强生成(RAG)进行主观难度评估,同时结合难度偏差感知算法和学生掌握算法进行精确难度测量。我们的框架引入了三个关键创新:(1)难度平衡感知序列(DBPS)——学生的主观感知与客观难度相结合,通过注意力机制测量LLM评估难度、数学统计难度和学生主观感知难度之间的差距;(2)难度掌握比率(DMR)——通过不同的难度区进行精确的学生掌握水平建模;(3)知识状态更新机制——通过门控网络实现个性化知识获取并更新学生知识状态。在两个真实数据集上的实验结果表明,我们的方法在一致性上优于九种基线模型,在AUC指标上提高了2%到10%,同时有效地解决了冷启动问题并增强了模型的可解释性。