LLM2D
针对短答案中空白识别的定向图对齐方法
Directed Graph-alignment Approach for Identification of Gaps in Short Answers
作者: Archana Sahu, Plaban Kumar Bhowmick
发布日期: 4/8/2025
arXiv ID: oai:arXiv.org:2504.04473v1

摘要

arXiv:2504.04473v1 类别: cross 摘要: 在本文中,我们提出了一种方法,通过将其与对应的模型答案/参考答案进行比较,自动识别学生答案中缺失的项目,即所谓的“空缺”。这些空缺可以在单词、短语或句子级别进行识别。识别出的空缺对于为形成性评估提供学生反馈是有用的。空缺识别问题被建模为一对代表学生答案和给定问题对应模型答案的有向图之间的对齐。为了验证所提出的方法,考虑了三个广泛-known的简答题评分数据集,即得克萨斯大学北坦普尔分校(UNT)、SciEntsBank和Beetle的标注空缺学生答案,该标注空缺学生答案的数据集可在以下链接获取:https://github.com/sahuarchana7/gaps-answers-dataset。在传统的机器学习任务中采用的评估指标用于评估空缺识别任务。尽管所提出方法在不同数据集和不同类型的答案上的性能有所不同,但总体而言,观察到其性能是令人鼓舞的。