LLM2D
如果它是由 AI 写的,那它就不可能是正确的:关于律师对由大型语言模型 (LLM) 撰写与由人类撰写的文档的偏好
It Cannot Be Right If It Was Written by AI: On Lawyers' Preferences of Documents Perceived as Authored by an LLM vs a Human
作者: Jakub Harasta, Tereza Novotn\'a, Jaromir Savelka
发布日期: 10/11/2024
arXiv ID: oai:arXiv.org:2407.06798v2

摘要

大型语言模型 (LLMs) 使得未来某些类型的法律文件可以自动生成成为可能。这极有可能简化法律流程,降低法律服务成本,并极大地提高司法公正。虽然许多研究人员专注于提出和评估支持法律领域任务的基于 LLMs 的应用程序,但对于法律专业人士如何看待他们认为由 LLM 生成的内容却缺乏调查。然而,这是一个关键点,因为过度依赖或毫无根据的怀疑可能会影响此类文件是否会带来适当的法律后果。本研究是对正在进行的向成熟生成式 AI 系统过渡的必要分析。具体来说,我们调查了律师和法学院学生 (n=75) 对法律文件感知是否因其假定的来源(人工制作 vs AI 生成)而异。参与者评估了这些文件,重点关注其正确性和语言质量。我们的分析表明,与被认为由 AI 生成的文件相比,人们明显更喜欢被认为由人类制作的文件。与此同时,大多数参与者预计未来将自动生成文件。这些发现可以被法律从业者、政策制定者和立法者用来负责任地实施和采用法律文件生成技术,并推动关于如何更新法律程序以反映最新技术发展的必要讨论。