摘要
arXiv:2501.14846v5 公告类型: 交叉替换
摘要:鉴于当前大型语言模型在对话间共享记忆方面的不足,本研究提出了一种 wormhole 记忆模块(WMM),以实现像魔方一样可以任意在不同对话间检索的记忆功能。通过仿真实验,研究者基于 Python 环境建立了一个实验框架,并通过设置记忆障碍来模拟当前 LLMs 对话间记忆难以共享的现状。CoQA 开发数据集被导入实验中,验证了 WMM 非线性索引和动态检索的功能,并与 Titans 和 MemGPT 记忆模块的能力进行了比较分析。实验结果显示,WMM 在八次实验中展示了跨对话检索记忆的能力,并且在定量指标上的稳定性得到了验证。WMM 对 LLMs 记忆管理的优化提出了新的技术方法,并为未来的实际应用提供了经验。