LLM2D
基于大型语言模型的真实性聚合及其在在线广告中的应用
Truthful Aggregation of LLMs with an Application to Online Advertising
作者: Ermis Soumalias, Michael J. Curry, Sven Seuken
发布日期: 10/10/2024
arXiv ID: oai:arXiv.org:2405.05905v4

摘要

大型语言模型 (LLM) 生成内容的营收是网络广告的下一个前沿领域。我们考虑一种场景,其中广告商旨在影响 LLM 的响应以使其符合自身利益,而平台则寻求最大化广告商价值并确保用户满意度。挑战在于,广告商的偏好通常与用户的偏好相冲突,并且广告商可能会虚报其偏好。为了解决这个问题,我们引入了 MOSAIC,这是一种拍卖机制,它确保真实报告成为广告商的主导策略,并将每个广告商的效用与其对社会福利的贡献相一致。重要的是,该机制无需对 LLM 进行微调或访问模型权重,并且随着计算资源的增加,可以证明其收敛到经过最佳微调的 LLM 的输出。此外,它可以整合关于广告商的上下文信息,从而显著提高社会福利。通过对公开可用的 LLM 进行实验,我们表明 MOSAIC 能够以较低的计算开销实现较高的广告商价值和平台营收。虽然我们的应用动机是网络广告,但我们的机制可以应用于任何涉及货币转移的场景,使其成为一种通用的解决方案,用于真实地汇总自利代理对 LLM 生成回复的偏好。