LLM2D
电商高级AI客户服务的端云协同框架
End-Cloud Collaboration Framework for Advanced AI Customer Service in E-commerce
作者: Liangyu Teng, Yang Liu, Jing Liu, Liang Song
发布日期: 10/10/2024
arXiv ID: oai:arXiv.org:2410.07122v1

摘要

近年来,电子商务行业对先进的AI驱动客户服务解决方案的需求迅速增长。传统的云端模型在延迟、个性化服务和隐私方面存在局限性。此外,终端设备通常缺乏有效部署大型AI模型的计算资源。本文提出了一种创新的端云协同(ECC)框架,用于电子商务中的高级AI客户服务。该框架通过深入挖掘云模型的泛化潜力并有效利用终端芯片的计算资源,整合大型云模型和中小型端模型的优势,在一定程度上缓解了计算资源的压力。具体来说,大型云模型充当教师,指导和促进端模型的学习,这显著降低了端模型对大规模、高质量数据的依赖,从而解决了传统端模型训练中的数据瓶颈,为行业应用的快速部署提供了一种新的范式。此外,我们引入了一种在线演化学习策略,使端模型能够在云模型的指导和实时用户反馈的基础上持续迭代和升级。该策略确保模型能够灵活适应应用场景的快速变化,同时通过本地微调避免敏感信息的上传,实现了隐私保护和个性化服务的双重目标。最后,我们进行了深入的语料库收集(例如,数据组织、清洗和预处理),并训练了一个基于ECC的电子商务客户服务行业专用模型。