LLM2D
注意差距!在不同语言的说服性共同写作任务中使用多语言LLM时的选择独立性
Mind the Gap! Choice Independence in Using Multilingual LLMs for Persuasive Co-Writing Tasks in Different Languages
作者: Shreyan Biswas, Alexander Erlei, Ujwal Gadiraju
发布日期: 2/14/2025
arXiv ID: oai:arXiv.org:2502.09532v1

摘要

arXiv:2502.09532v1 类型: cross 摘要: 近年来生成AI的进步催生了新型写作助手的普及。这类系统通常依赖多语言大型语言模型(LLMs),使全球工作者能够在不同语言下修改或创建多样的内容。然而,有大量的证据表明,多语言LLMs在不同语言中的表现存在差异。使用多语言写作助手进行多种语言创作的用户因此可能面临输出质量的不一致性。重要的是,近期的研究表明,人们往往会跨独立任务泛化算法错误,违反了行为选择独立性的公理。在这篇论文中,我们分析了在慈善广告写作任务中,用户使用新型写作助手的行为是否受到AI在第二种语言中表现的影响。此外,我们量化了这些模式如何转化为生成慈善广告的说服力,以及人们关于LLM使用来源的信念在捐赠决策中的作用。我们的结果显示,接触到基于LLM的写作助手的作者违反了选择独立性,因为先接触过西班牙语LLM会减少后续使用英语LLM的利用。虽然这些模式并未直接影响生成广告的整体说服力,但人们对广告来源(人类还是AI)的信念确实产生了影响。特别是,相信自己阅读了AI生成广告的西班牙语女性参与者强烈调整了捐赠行为。此外,人们通常无法充分区分人类生成和LLM生成的广告。我们的工作对多语言LLM作为辅助代理的设计、开发、整合和采纳具有重要意义,尤其是在写作任务中。