摘要
arXiv:2501.14846v2 通识类型: replace-cross
摘要: 鉴于当前大型语言模型在跨对话共享内存方面的差距,本研究提出了一种wormhole记忆模块(WMM),以实现可以在不同对话之间任意检索的记忆方式,犹如魔方。通过仿真实验,研究者基于Python环境构建了一个实验框架,并通过设置记忆障碍来模拟当前大型语言模型(LLMs)之间对话记忆难以共享的情况。将CoQA开发数据集导入实验中,并验证了WMM的非线性索引和动态检索功能在跨对话记忆检索方面的可行性。还对WMM的能力与Titans和MemGPT记忆模块的特性进行了比较分析。实验结果显示,WMM在八次实验中展现了跨对话检索记忆的能力和量化指标的稳定性。该研究为LLMs的内存管理优化提供了新的技术方法,并为未来的实际应用提供了经验。