LLM2D
PropaInsight:探究宣传技巧、诉求和意图的深层理解
PropaInsight: Toward Deeper Understanding of Propaganda in Terms of Techniques, Appeals, and Intent
作者: Jiateng Liu, Lin Ai, Zizhou Liu, Payam Karisani, Zheng Hui, May Fung, Preslav Nakov, Julia Hirschberg, Heng Ji
发布日期: 10/1/2024
arXiv ID: oai:arXiv.org:2409.18997v1

摘要

宣传在塑造公众舆论和助长虚假信息方面发挥着至关重要的作用。虽然现有的研究主要集中在识别宣传技巧,但它缺乏捕捉更广泛的动机和此类内容影响的能力。为了解决这些挑战,我们引入了propainsight,这是一个基于社会科学基础研究的理论框架,它系统地将宣传分解为技巧、唤醒诉求和潜在意图。propainsight提供了对宣传如何在不同环境中运作的更细致入微的理解。此外,我们还提出了propagaze,这是一个新颖的数据集,它将人工标注数据与通过精心设计的管道生成的优质合成数据相结合。我们的实验表明,现成的LLM难以进行宣传分析,但用propagaze进行训练可以显著提高性能。与一次性GPT-4-Turbo相比,微调后的Llama-7B-Chat在技巧识别方面的文本跨度IoU提高了203.4%,在诉求分析方面的BertScore提高了66.2%。此外,propagaze在数据稀疏和跨域场景中补充了有限的人工标注数据,显示出其在全面和可泛化宣传分析方面的潜力。