摘要
arXiv:2501.07288v2 通告类型: 替换
摘要: 大型语言模型(LLMs)开发的集中化已经创建了人工智能进步的重大障碍,限制了这些强大技术的民有化。这种集中化,加上高质量训练数据的稀缺性和维持跨快速扩展知识领域的全面专业知识的日益复杂性,对LLMs的持续发展提出了关键挑战。虽然检索增强生成(RAG)等解决方案提供了一定的补救措施,但在多样化领域中保持最新的专家知识仍然是一个重大挑战,尤其是在特定信息以指数级增长的情况下。本文介绍了基于区块链的大型语言模型网络(LLM-Net),该框架通过去中心化的专业LLM提供者网络来民有化LLMs-as-a-Service。通过利用集体计算资源和分布式的领域专长,LLM-Net整合了针对各种特定领域的微调专家模型,通过协作提示机制确保知识的持续增长,同时维护服务的质量。该框架的稳健设计包括区块链技术,以实现透明的交易和性能验证,建立服务交付的不可变记录。基于最先进的LLM,如Claude 3.5 Sonnet、Llama 3.1、Grok-2和GPT-4o的仿真验证了基于声誉机制的有效性,能够选择性能高的受访者(LLM提供商),从而维持服务质量。因此,它证明了LLM-Net通过整合分散的专业知识和基于区块链的责任制,有望推动人工智能的进步。