arXiv:2406.12665v3 公告类型: replace-cross 摘要：统一框架的发展使得大型语言模型（LLMs）之间无缝互操作成为可能，从而使得LLM-LLM协作完成开放任务成为可能。尽管如此，尚未有人探索这种协作写作。我们从人类-LLM协作迈向探索多LLM场景，通过生成首个完全由LLM生成的协作故事数据集CollabStory进行探索。我们关注单一作者到多作者（最多5个LLM）的场景，其中多个LLM共同撰写故事。我们使用开源指令调整的LLM生成了超过32000个故事。此外，我们借鉴了PAN任务，这些任务已经为人类-人类多作者写作任务和分析设定了标准。我们扩展了多LLM环境下的相关作者任务，并介绍了LLM-LLM协作的基准。我们发现当前的基准无法处理这一新兴场景。因此，CollabStory是一个有助于推动多LLM使用理解和新方法开发的资源。在写作任务的背景下，LLM-LLM协作可能会使正在进行的关于抄袭检测、成果归属、学术诚信在教育环境中的维护以及应对版权侵权的关注变得复杂。我们已将数据集和代码发布在https://github.com/saranya-venkatraman/CollabStory。