LLM2D
CoSER: 协调基于LLM的角色 personas 模拟
CoSER: Coordinating LLM-Based Persona Simulation of Established Roles
作者: Xintao Wang, Heng Wang, Yifei Zhang, Xinfeng Yuan, Rui Xu, Jen-tse Huang, Siyu Yuan, Haoran Guo, Jiangjie Chen, Wei Wang, Yanghua Xiao, Shuchang Zhou
发布日期: 2/14/2025
arXiv ID: oai:arXiv.org:2502.09082v1

摘要

arXiv:2502.09082v1 Announce Type: cross 摘要:角色扮演语言代理(RPLAs)已成为大型语言模型(LLMs)的有前途的应用之一。然而,模拟已有的角色对RPLAs来说是一项具有挑战性的任务,因为缺乏真实的角色数据集以及使用此类数据进行细致评估的方法。本文中,我们提出了CoSER,它包含一个高质量的数据集、开放模型以及一种有效的角色扮演评价协议,以促进已有的角色的角色扮演语言代理的发展。CoSER数据集涵盖了来自771本名著的17,966个角色。它提供了具有现实世界复杂性的真实对话,以及对话设置、角色经历和内部想法等多种数据类型。借鉴表演方法,我们引入了给定情境表演法,用于训练和评估角色扮演的LLMs,在这种方法中,LLMs按顺序在书中的场景中扮演多个角色。利用我们的数据集,我们开发了CoSER 8B和CoSER 70B,即基于LLaMA-3.1模型的先进的开放式角色扮演LLMs。广泛的实验表明,CoSER数据集对于RPLA的训练、评估和检索具有价值。此外,CoSER 70B在我们的评价和三个现有基准上表现出了最先进的性能,分别在InCharacter和LifeChoice基准上实现了75.80%和93.47%的准确率,超越或与GPT-4o持平。