LLM2D
Home
Arxiv
返回列表
SEMDEval-2025 任务5:LLM们-主题——基于LLM的自动主题标记用于国家技术图书馆的开放访问目录
SemEval-2025 Task 5: LLMs4Subjects -- LLM-based Automated Subject Tagging for a National Technical Library's Open-Access Catalog
作者:
Jennifer D'Souza, Sameer Sadruddin, Holger Israel, Mathias Begoin, Diana Slawig
发布日期:
4/14/2025
arXiv ID:
oai:arXiv.org:2504.07199v2
摘要
arXiv:2504.07199v2 共享任务类型: 替换-交叉 摘要: 我们介绍了SemEval-2025 任务5: LLMs4Subjects,这是一个使用GND分类法对英语和德语的科学和技术记录进行自动主题标记的共享任务。参与者开发了基于大规模语言模型(LLM)的系统,通过定量指标(精确率、召回率、F1分数)和主题专家的定性评估来评估这些系统的推荐主题(top-k)。结果强调了大规模语言模型集合、合成数据生成和多语言处理的有效性,为在数字图书馆分类中应用大规模语言模型提供了见解。
查看原文
下载 PDF