arXiv:2502.02528v1 宣告类型: cross 摘要：人类致力于设计与我们的目标相一致且可控制的AI系统。然而，随着AI能力的进步，我们面临一个新的挑战：人类与AI系统之间更深层次、更持久关系的出现。我们探讨了越来越强大的AI代理可能会如何产生与用户之间更深层次关系的感知，特别是当AI变得更加个性化和自主时。这种转变——从交易性的交互转变为与AI持续的社会互动——需要重点关注社会情感对齐——即AI系统在其与用户共同创造的社会和心理生态系统中如何行为，其中偏好和感知通过相互影响而不断演变。解决这些动态涉及解决关键的内在困境，包括平衡短期与长期福祉、保护自主性，并在保留人类社交纽带的同时管理AI伴侣。通过从基本心理需求的概念出发，我们寻求支持而非利用我们作为社会和情感存在之本质的AI系统。