arXiv:2502.01706v2 交叉公告类型 摘要：受生物学启发的神经网络为建模数据分布提供了替代方法。FlyVec 是一个最近的例子，它受到果蝇嗅觉电路的启发，旨在解决学习词嵌入的任务。令人惊讶的是，该模型在与专门设计用于编码文本的深度学习方法竞争时表现得非常出色，并且在计算效率方面达到了最高程度。我们提出了一个问题：这种性能是否可以进一步提高。为此，我们引入了Comply。通过引入复数权重来包含位置信息，我们使单层神经网络能够学习序列表示。我们的实验显示，Comply 不仅超越了FlyVec，还与显著更大的先进模型表现相当。我们做到了这一点而不需要额外的参数。Comply 提供了句子的稀疏上下文表示，可以从神经元权重中显式地进行解释。