摘要
arXiv:2504.13828v1 类别: cross
摘要:第一代大型语言模型——可以称为生成式人工智能的“第一幕”(2020-2023)——通过大规模参数和数据缩放取得了卓越的成功,但在知识延迟、浅层推理和受限的认知过程中显示出根本性的局限性。在此期间,提示工程成为我们与人工智能的主要接口,通过自然语言实现对话级别的通信。我们现在目睹了“第二幕”的出现(2024年至今),在此期间,模型正在从潜空间的知识检索系统过渡为通过测试时缩放技术构建思维的引擎。这一新的范式通过语言基础的思维与人工智能建立了心智级别的连接。在本文中,我们阐明了认知工程的概念基础,并解释了为什么这一刻对于其发展至关重要。我们通过全面的教程和优化实现系统地分解这些高级方法,使认知工程的访问民主化,使每位实践者都能参与人工智能的第二幕。我们提供了一个定期更新的测试时缩放论文集合,在GitHub存储库中:https://github.com/GAIR-NLP/cognition-engineering