LLM2D
基于流形上的随机梯度下降的加权低秩逼近
Weighted Low-rank Approximation via Stochastic Gradient Descent on Manifolds
作者: Conglong Xu, Peiqi Yang, Hao Wu
发布日期: 2/21/2025
arXiv ID: oai:arXiv.org:2502.14174v1

摘要

arXiv:2502.14174v1 宣告类型: 交叉 摘要: 我们通过流形上的梯度重排随机梯度下降解决了正则化加权低秩逼近问题。为了保证我们的随机梯度下降的收敛性,我们建立了一个针对受限梯度重排随机梯度下降算法在流形上的收敛定理。在Netflix Prize训练数据集的样本数据上,我们的算法优于现有在欧几里得空间上的随机梯度下降。我们还比较了该流形上的加速线搜索与现有欧几里得空间上的加速线搜索。