LLM2D
稳定神经随机微分方程在分析不规则时间序列数据中的应用
Stable Neural Stochastic Differential Equations in Analyzing Irregular Time Series Data
作者: YongKyung Oh, Dongyoung Lim, Sungil Kim
发布日期: 11/25/2024
arXiv ID: oai:arXiv.org:2402.14989v5

摘要

现实世界中的时间序列数据常常存在不规则采样间隔和缺失值,这给那些假设采样间隔一致且数据完整度的传统方法带来了挑战。神经常微分方程 (Neural ODEs) 提供了一种替代方法,它结合神经网络和常微分方程求解器,通过参数化向量场学习连续的潜在表示。神经随机微分方程 (Neural SDEs) 在 Neural ODEs 的基础上引入了扩散项,但这并非易事,尤其是在处理不规则间隔和缺失值时。因此,仔细设计漂移和扩散函数对于维持稳定性和提高性能至关重要,而草率的选择可能会导致诸如缺乏强解、随机失稳或欧拉离散化不稳定等不利特性,从而显著影响 Neural SDEs 的性能。在本研究中,我们提出了三类稳定的 Neural SDEs:Langevin 型 SDE、线性噪声 SDE 和几何 SDE。然后,我们严格证明了它们在保持出色性能方面的鲁棒性,同时有效地防止过拟合。为了评估我们方法的有效性,我们在四个基准数据集上进行了广泛的实验,涵盖插值、预测和分类任务,并使用 30 个公共数据集分析了我们方法在不同缺失率下的鲁棒性。我们的结果证明了所提出的方法在处理现实世界不规则时间序列数据方面的有效性。