arXiv:2410.13821v2 声明类型: 替换-交叉 摘要：神经科学和人工智能领域长期以来都知道，神经元之间的“绑定”会导致一种竞争性学习形式，其中表示被压缩以在神经网络的深层表示更抽象的概念。最近还假定，动态（时空）表示在神经科学和人工智能中都发挥着重要作用。在此基础上，我们引入了人工库拉莫科振荡神经元（AKOrN）作为阈值单元的动态替代品，可以与全连接、卷积或注意机制等各种连接设计结合使用。我们广义化的库拉莫科更新通过同步动力学将神经元绑定在一起。我们展示了这一理念在从无监督对象发现、对抗鲁棒性、校准的不确定性量化以及推理等一系列任务中提供了性能改进。我们认为，这些实验结果表明，重新思考神经表示中最基本的神经元层次的假设的重要性，并且特别是强调了动态表示的重要性。代码：https://github.com/autonomousvision/akorn 项目页面：https://github.com/takerum/akorn_project_page