LLM2D
SemEval-2025 任务 5: LLMs4Subjects —— 基于大语言模型的国家技术图书馆开放访问目录自动主题标记
SemEval-2025 Task 5: LLMs4Subjects -- LLM-based Automated Subject Tagging for a National Technical Library's Open-Access Catalog
作者: Jennifer D'Souza, Sameer Sadruddin, Holger Israel, Mathias Begoin, Diana Slawig
发布日期: 4/11/2025
arXiv ID: oai:arXiv.org:2504.07199v1

摘要

arXiv:2504.07199v1 交叉类型:通告 摘要:我们介绍了SemEval-2025 任务5:LLMs4Subjects,这是一个使用GND分类法为英语和德语的科学和技术记录自动标记主题的共享任务。参与者开发了基于LLM的系统来推荐前k个主题,并通过定量化指标(精确率、召回率、F1分数)和主题专家的定性评估进行了评估。结果突出了LLM集成、合成数据生成和多语言处理的有效性,为在数字图书馆分类中应用LLM提供了见解。