摘要
随着研究机构越来越致力于支持联合国可持续发展目标 (SDG),准确评估其研究成果与这些目标的契合度变得迫在眉睫。当前的方法主要依赖于基于关键词的布尔搜索查询,这种方法混淆了偶然的关键词匹配和真正的贡献,降低了检索精度,并使基准测试工作复杂化。本研究调查了使用自回归大型语言模型 (LLM) 作为评估代理来识别学术出版物中对 SDG 目标的相关学术贡献的应用。使用通过 SDG 特定关键词查询检索到的学术摘要数据集,我们证明了小型本地托管的 LLM 可以区分对 SDG 目标的语义相关贡献与由于偶然关键词匹配而检索到的文档,从而解决了传统方法的局限性。通过利用 LLM 的上下文理解能力,这种方法提供了一个可扩展的框架,用于改进 SDG 相关的研究指标并为机构报告提供信息。