arXiv:2409.14248v1 公告类型: 交叉 摘要: 求解偏微分方程 (PDEs) 是许多科学和工程发现中重要且不可或缺的组成部分。深度学习赋能的常见方法之一是物理信息神经网络 (PINNs)。最近，一种新型基础神经网络模型，Kolmogorov-Arnold 网络 (KANs)，被提出作为多层感知器 (MLPs) 的替代品，并具有可训练的激活函数。为了提高 KANs 的拟合精度，有人建议对 KANs 进行修改，称为 ReLU-KANs，使用“ReLU 的平方”作为其激活函数的基础。在这项工作中，我们提出了另一种激活函数的基础，即高阶 ReLU，它比 KANs 中使用的激活函数基础（即 B 样条）更简单；允许高效的 KAN 矩阵操作；并且具有平滑且非零的高阶导数，这对于物理信息神经网络至关重要。我们在两个标准且典型的 PDE 上进行了详细实验，即线性泊松方程和具有粘性的非线性 Burgers 方程，结果表明我们提出的高阶 ReLU-KANs (HRKANs) 在 KANs、ReLU-KANs 和 HRKANs 中实现了最高的拟合精度和训练鲁棒性，并且训练时间显著降低。