摘要
arXiv:2502.12102v1 Announce Type: 新
摘要:我们如何设计和与社会人工智能互动取决于AI被设计为模仿或占据的社会关系角色。在人类社会中,像教师-学生、家长-孩子、邻里、兄弟姐妹或雇主-雇员这样的关系由特定规范治理,这些规范规定或禁止合作功能,包括等级、关怀、交易和繁殖。这些规范塑造了我们对每个合作伙伴适宜行为的判断。例如,职场规范可能允许老板对员工发布命令,但不允许反之,反映了等级和交易的期望。随着大型语言模型驱动的AI代理和聊天机器人越来越被设计为类似于人类职位的角色——如助手、心理健康提供者、导师或伴侣——探讨人类与AI互动中是否以及如何将人类的社会关系规范扩展至其中变得至关重要。我们的分析探讨了AI系统与人类之间的差异,如缺乏意识经验和免疫疲劳所带来的影响,这些差异可能影响AI履行特定关系功能并遵守相应规范的能力。这项分析是由哲学家、心理学家、关系科学家、伦理学家、法律专家和AI研究人员共同完成的,对AI系统的设计、用户行为和监管具有重要意义。虽然我们承认AI系统可以在某些社会关系角色中提供显著的便利性,如增加可用性和一致性,但它们也存在促进不健康依赖或不现实期望的风险,这些期望可能渗透到人与人的关系中。我们提出,理解并仔细塑造(或实施)适当的人类与AI关系规范对于确保人类与AI的互动是道德的、可信赖的,并有利于人类福祉至关重要。