arXiv:2504.05862v2 宣告类型：替换 摘要：基于大型语言模型的代理正在成为一种低成本机制，用于提供个性化的对话建议，并且已经在相对简单的场景中（如电影推荐）展现了令人印象深刻的能力。但这些代理在需要专业知识且错误会有重大风险的复杂高风险领域中表现如何呢？这篇论文探讨了在金融领域大型语言模型顾问的有效性，重点关注三个不同的挑战：（1）在用户的自身需求也不一定明确的情况下，引导用户偏好；（2）为具有不同投资偏好的用户提供个性化指导；（3）利用顾问的人格建立关系并培养信任。通过一项基于实验室的用户研究，共有64名参与者参与，我们发现，在引导偏好方面，大型语言模型顾问往往能够匹配人类顾问的表现，尽管它们在解决冲突的用户需求方面存在困难。在提供个性化建议时，大型语言模型能够积极影响用户行为，但展示了明显的失败模式。我们的结果显示，准确捕捉偏好是关键，否则，大型语言模型顾问几乎没有影响，甚至可能将投资者引导至不合适的资产。更为令人担忧的是，用户似乎对所提供的建议质量不敏感，甚至更糟糕的是两者之间存在倒挂的关系。事实上，用户报告称，具有外向人格的大型语言模型更受欢迎，用户满意度更高，情感信任也更强，尽管这些代理提供的建议更差。