LLM2D
研究生翻译学生能否识别机器生成的文字?
Can postgraduate translation students identify machine-generated text?
作者: Michael Farrell
发布日期: 4/21/2025
arXiv ID: oai:arXiv.org:2504.09164v2

摘要

arXiv:2504.09164v2 通知类型: 替换交叉 摘要: 鉴于生成式人工智能作为创作多语言内容和绕过机器和传统翻译方法的工具使用日益增长,本研究探讨了经过语言训练的人士能否辨别机器生成的内容与人的写作文本(HT)的能力。在简短的培训后,了解通常在合成文本(ST)中发现的文本异常,二十名研究生翻译学生分析了意大利散文片段,并分配概率评分以表明他们认为这些文本是人写的还是AI生成(ChatGPT-4o)的。结果显示,学生们平均难以区分HT和ST,只有两名参与者达到了明显的准确性。进一步分析发现,学生们在HT和ST中都指出了相同的文本异常,尽管像低突度特征和自相矛盾这样的特点更常与ST相关联。这些发现表明需要改善预备培训。此外,研究还引发了需要编辑合成文本以使其听起来更像人类写成的必要性的疑问,并建议进一步研究以确定AI生成的文本是否已经足够自然,无需进一步精炼。