摘要
针对日益复杂和庞大的科学文献,本文提出了 LLMs4Synthesis 框架,旨在增强大型语言模型 (LLMs) 在生成高质量科学综述方面的能力。该框架旨在快速、连贯且上下文丰富的整合科学见解,并利用开源和专有 LLMs。它还考察了 LLMs 在评估这些综述的完整性和可靠性方面的有效性,弥补了当前定量指标的不足。我们的研究通过开发一种新颖的科学论文处理方法、定义新的综述类型以及建立九项详细的综述质量评估标准,为该领域做出了贡献。建议将 LLMs 与强化学习和 AI 反馈相结合,以优化综述质量,确保其与既定标准保持一致。LLMs4Synthesis 框架及其组件已公开发布,有望提高科学研究综述的生成和评估过程。