LLM2D
近似费舍尔影响函数:更快的数据影响估计在统计模型中的应用
The Approximate Fisher Influence Function: Faster Estimation of Data Influence in Statistical Models
作者: Omri Lev, Ashia C. Wilson
发布日期: 4/11/2025
arXiv ID: oai:arXiv.org:2407.08169v2

摘要

arXiv:2407.08169v2 宣告类型: replace-cross 摘要: 量化 infinitesimal 变化在训练数据上对模型性能的影响是理解并改进机器学习模型的关键。在本文中,我们将这个问题重新表述为加权经验风险最小化,并通过使用信息几何增强现有的基于影响函数的方法,以推导出一种新的算法来估计影响。我们的表述在各种应用中表现出高度的灵活性,并且我们在模拟中进一步证明了即使在非凸情况下,它仍然具有信息价值。此外,我们展示了我们的方法在计算效率上显著优于当前基于牛顿步的方法。