LLM2D
受生物启发的分层时间记忆增强:基于硬件加速的反射记忆
Enhancing Biologically Inspired Hierarchical Temporal Memory with Hardware-Accelerated Reflex Memory
作者: Pavia Bera, Sabrina Hassan Moon, Jennifer Adorno, Dayane Alfenas Reis, Sanjukta Bhanja
发布日期: 4/8/2025
arXiv ID: oai:arXiv.org:2504.03746v1

摘要

arXiv:2504.03746v1 宣布类型:交叉 摘要:随着物联网(IoT)的迅速扩张,产生的数据量大到以泽字节(zettabytes)计,这要求高效的无监督学习系统。层次时序记忆(Hierarchical Temporal Memory, HTM)是无监督人工智能的第三代算法,通过对模拟神经元列进行建模,来处理和预测序列。这些神经元列可以在多个层次上记忆和推断序列。虽然多层次推断提供了强大的预测能力,但通常伴随着显著的计算开销。HTM中的序列记忆(Sequence Memory, SM)组件负责管理这些推断,由于其广泛的可编程互连而遭遇瓶颈。在许多情况下,已观察到一级时间关系对于推断已经足够,而不会造成显著的效率损失。本文介绍了一种灵感来源于脊髓工作机制的反射记忆(Reflex Memory, RM)块,旨在加速一级推断的处理。RM块相较于SM能够显著加快这些推断的速度。RM块与HTM的整合形成了加速层次时序记忆(Accelerated Hierarchical Temporal Memory, AHTM)系统,在处理重复信息方面比原始的HTM更高效,同时还支持多层次推断。实验结果显示,HTM预测事件所需时间为0.945秒,而AHTM模块只需要0.125秒。此外,将RM硬件实现为内容地址可寻址内存(content-addressable memory, CAM)块,从而形成的硬件加速层次时序记忆(Hardware-Accelerated Hierarchical Temporal Memory, H-AHTM)在预测事件时只需要0.094秒,显著提高了推断速度。与原始算法[1]相比,AHTM将推断加速了7.55倍,而H-AHTM进一步提升了性能,实现了10.10倍的速度提升。