摘要
arXiv:2303.12973v3 宣告类型:更换
摘要:点击后转换率(CVR)是可靠地衡量在线客户偏好的指标,对于开发推荐系统至关重要。预测CVR的主要挑战是严重的选择偏差,这是由于用户的固有自我选择行为和系统对项目的筛选过程造成的。为了缓解这一问题,使用了逆倾向评分(IPS)来加权每个观测实例的预测误差。然而,当前的倾向评分估计不可靠,因为缺乏质量度量。为了解决这个问题,我们从不确定性校准的视角评估倾向评分的质量,提出了使用期望校准误差(ECE)作为倾向评分质量的度量,该度量通过评估预测概率与实际观察频率之间的差异来量化预测概率的过于自信的程度。校准不佳的倾向评分会导致IPS权重失真,从而影响CVR预测中的去偏差过程。在本文中,我们引入了基于模型的校准框架,用于CVR预测的倾向评分去偏差。理论分析表明,校准的倾向评分估计优于未校准的估计。在Coat、Yahoo和KuaiRand数据集上的实验显示,通过降低ECE值提高了不确定性校准,从而提高了CVR预测的效果。