LLM2D
“易变”的智能:将LLM作为政治和社会科学推理的工具
Arti-"fickle" Intelligence: Using LLMs as a Tool for Inference in the Political and Social Sciences
作者: Lisa P. Argyle, Ethan C. Busby, Joshua R. Gubler, Bryce Hepner, Alex Lyman, David Wingate
发布日期: 4/8/2025
arXiv ID: oai:arXiv.org:2504.03822v1

摘要

arXiv:2504.03822v1 宣告类型: cross 摘要: 生成型大型语言模型(LLMs)极其有用、灵活且充满潜力。然而,当它们被用来增进对我们现实人类行为和关切的理解时,它们对政治和社会科学研究人员最有用。为了促进对LLMs的科学使用,我们建议政治和社会科学领域的研究人员需要专注于科学目标——推断。为此,我们讨论了使用LLMs进行科学推断所面临的挑战和机遇,将模型输出的验证作为讨论的典型案例。我们提出了一套关于在完成特定任务时确立LLMs成功和失败的标准指南,并讨论了我们如何从这些观察中进行推断。最后,我们讨论了这一重新聚焦如何改进我们对这些工具及其在社会科学中应用的共享科学知识的积累。