arXiv:2503.21794v1 类型: 交叉学科 摘要：本文探讨了构建形式神经元和多层人工神经网络（ANN）能量景观的方法。通过对这些系统的分析，可以确定分类ANN（例如，MLP或CNN）和生成型ANN模型的概念局限性。对形式神经元和ANN模型的信息熵和热力学熵的研究得出结论，信息熵具有能量性质。应用吉布斯自由能的概念，可以将ANN的输出信息表示为焓的有序部分。将ANN建模为能量系统，使得可以将系统内部能量的结构解释为其对外部世界的内部模型，该模型基于系统内部能量组件的相互作用进行自我组织。通过对能量函数（类似于李雅普unov函数）的应用减缩运算，可以控制这种模型的自我组织和演化过程。这使得有可能引入一种新的直接学习方法来构建自我组织和进化的ANN，无需额外的外部算法。文中所呈现的研究使我们能够从系统内外能量交互过程的角度正式定义信息。