arXiv:2408.16073v2 Announce Type: replace-cross 摘要：本报告分析了大规模语言模型（LLMs）加速营销领域消息效果已发表研究的准确复制和泛化的潜在能力。通过使用包含45项近期研究的14篇论文中的133项实验发现，在《营销杂志》上发表的研究，测试了LLM驱动的参与者（ personas）。对于每项研究，使用其测量方法、刺激物和抽样规范生成提示，使LLM扮演独特的角色。这些AI角色在所有研究中总计有19,447个，生成了完整的数据集。随后将统计分析与原始的人类研究结果进行了比较。LLM复制成功再现了76%的主要效应（84项中的111项），展示了AI辅助复制的强大潜力。包括交互效应在内的总复制率为68%（133项中的90项）。此外，一项测试人类结果在不同参与者样本、媒体刺激物和指标下泛化的测试表明，当测试超越原始人类研究的参数时，复制结果会发生变化。讨论了这些发现对社会科学研究中的复制和泛化危机、媒体和营销心理学理论构建加速以及快速消息测试在消费者产品中的实践优势的影响。针对复杂交互作用、AI模型中的偏差以及在营销研究中制定AI指标基准的问题，讨论了AI复制的局限性。