arXiv:2502.01706v1 公告类型：cross 摘要：受生物学启发的神经网络为建模数据分布提供了替代途径。FlyVec 是一个最近的例子，它受到果蝇嗅觉电路的启发，解决词嵌入的任务。令人惊讶的是，该模型甚至在专门设计用于编码文本的深度学习方法面前表现得十分竞争力，并且以最高的计算效率做到这一点。我们提出的问题是，这种性能是否可以进一步提高。为此，我们引入了 Comply。通过结合位置信息以复权重的形式，我们使单层神经网络能够学习序列表示。我们的实验显示，Comply 不仅超越了 FlyVec，而且在与显著更大的最先进的模型齐平方面表现出色。我们实现这一点无需额外的参数。Comply 生成的句子的稀疏上下文表示可以从神经元权重中明确解释。