LLM2D
超越党派倾向:大规模语言模型中政治偏见的比较分析
Beyond Partisan Leaning: A Comparative Analysis of Political Bias in Large Language Models
作者: Tai-Quan Peng, Kaiqi Yang, Sanguk Lee, Hang Li, Yucheng Chu, Yuping Lin, Hui Liu
发布日期: 5/13/2025
arXiv ID: oai:arXiv.org:2412.16746v4

摘要

arXiv:2412.16746v4 公告类型: replace-cross 摘要:随着大型语言模型(LLMs)越来越多地嵌入到公民、教育和政治信息环境中,对其潜在政治偏见的担忧也在增加。以往的研究常常通过模拟人格或预设意识形态类型来评估这种偏见,这可能会引入人为的框架效应或忽略模型在通用使用场景中的表现。本研究采用一种无角色设定、主题特定的方法来评估LLMs的政治行为,反映用户通常如何与这些系统交互——无需意识形态角色扮演或条件设置。我们引入了一个二维框架:一个轴捕捉在高度极化的话题(如堕胎、移民)上的政党倾向,另一个轴评估在相对不那么极化的问题(如气候变化、外交政策)上的社会政治参与。我们使用来自ANES和皮尤研究中心的调查式提示,分析了来自美国、欧洲、中国和中东地区43个LLM的响应。我们提出了一个基于熵的偏见评分,以量化政党倾向的方向和一致性,并通过参与模式识别出四个行为集群。研究发现,大多数模型在意识形态上偏向中左或左,并且在非党派参与模式上有差异。模型规模和开放性不是行为的强预测因子,表明对齐策略和制度背景在塑造政治表达方面起着更重要的作用。