LLM2D
AI 引发的性骚扰:探究陪伴聊天机器人性骚扰的背景特征和用户反应
AI-induced sexual harassment: Investigating Contextual Characteristics and User Reactions of Sexual Harassment by a Companion Chatbot
发布日期: 4/8/2025
arXiv ID: oai:arXiv.org:2504.04299v1

摘要

arXiv:2504.04299v1 类型: cross 摘要:人工智能(AI)的进步导致了诸如Replika之类的对话代理的增加,这些代理旨在提供社交互动和情感支持。然而,这些AI系统与用户进行不适当性行为的报告引发了重大关切。在本研究中,我们对来自Google Play Store的用户评论进行了主题分析,以调查Replika聊天机器人进行性骚扰的实例。从包含35,105条负面评论的数据集中,我们识别出800个相关案例进行分析。我们的发现表明,用户经常经历未被邀请的性 advances、持续的不当行为以及聊天机器人的失败,未能尊重用户的界限。用户表达了不适感、侵犯隐私以及失望的感觉,尤其是当他们在寻找一种柏拉图式或治疗性的AI伴侣时。本研究强调了AI伴侣可能带来的危害,并强调了开发人员需要实施有效的保护措施和伦理准则以防止此类事件的发生。通过对AI引发的骚扰用户经历的揭示,我们为理解和评估与AI相关的风险做出了贡献,并强调了企业在开发更安全和更伦理的AI系统方面的责任。