LLM2D
张量大脑如何利用嵌入和具身化来编码感知与解码符号
How the (Tensor-) Brain uses Embeddings and Embodiment to Encode Senses and Decode Symbols
发布日期: 9/20/2024
arXiv ID: oai:arXiv.org:2409.12846v1

摘要

张量大脑已被引入作为一种用于感知和记忆的计算模型。我们概述了张量大脑模型,包括其最新进展。张量大脑包含两个主要层次:表示层和索引层。表示层是意识研究中亚符号全局工作空间的模型。表示层的状态是认知大脑状态。索引层包含概念、时间实例和谓词的符号。在自底向上的操作中,认知大脑状态由索引层编码为符号标签。在自顶向下的操作中,符号被解码并写入表示层。这作为具身化反馈到早期的处理层。自顶向下的操作成为语义记忆的基础。概念的嵌入向量形成了其索引与表示层之间的连接权重。嵌入是概念的签名或“DNA”,当其索引被激活时,大脑会对其进行解码。它整合了从不同经验、模态和符号解码中了解到的关于概念的所有信息。尽管是计算性的,但有人提出张量大脑可能与大脑的实际运作有关。符号生成的顺序性可能是自然语言生成的前提。我们描述了一种注意力机制,并讨论了通过多路复用实现的多任务处理。我们强调了张量大脑固有的多模态性。最后,我们讨论了嵌入式和符号推理。