摘要
arXiv:2501.14846v4 通告类型:替换交叉
摘要:鉴于当前大型语言模型在对话间共享记忆方面存在差距,本研究提出了一种wormhole记忆模块(WMM),旨在实现记忆如同魔方一样,可以在不同对话之间任意检索。通过模拟实验,研究者基于Python环境构建了一个实验框架,并通过设置记忆障碍来模拟当前难以在大型语言模型(LLM)之间共享记忆的情况。CoQA开发数据集被导入实验中,并验证了WMM在非线性索引和动态检索方面的跨对话记忆检索功能,同时与Titans和MemGPT记忆模块的功能进行了比较分析。实验结果显示,WMM在八次实验中展示了跨对话检索记忆的能力,并且在量化指标方面的稳定性得到了验证。WMM为LLM的记忆管理优化提供了新的技术思路,并为未来的实际应用提供了经验。