arXiv:2502.09670v1 宣布类型：交叉 摘要：大型基础模型的涌现现象已彻底改变了自然语言处理领域。然而，由于这些模型的规模、功能以及在多种应用中的部署，对其进行评估提出了重大挑战。现有文献往往集中于单一方面的内容，如基准性能或特定任务，但未能提供一个综合的过程，将多元应用场景中的细微差别与更广泛的伦理和运营考虑结合起来。本文专注于三个方面：(1) 通过提供针对特定应用场景环境量身定制的结构化框架来正式化评估过程，(2) 提供实用工具和框架，如检查表和模板，以确保彻底、可重复和实用的评估，(3) 概览近期工作，针对LLM评估的最新进展进行有针对性的综述，强调实际应用。