LLM2D
OpenAI API 在 Stack Overflow 上的讨论实证研究
An Empirical Study of OpenAI API Discussions on Stack Overflow
作者: Xiang Chen, Jibin Wang, Chaoyang Gao, Xiaolin Ju, Zhanqi Cui
发布日期: 5/8/2025
arXiv ID: oai:arXiv.org:2505.04084v1

摘要

arXiv:2505.04084v1 类别:交叉学科 摘要:大型语言模型(LLMs)的迅速发展,以 OpenAI 的 GPT 系列为代表,对自然语言处理、软件开发、教育、医疗保健、金融和科学研究等多个领域产生了重大影响。然而,OpenAI API 引入了与传统 API 相比的独特挑战,如提示工程的复杂性、基于标记的成本管理、非确定性输出以及作为黑箱操作。据我们所知,开发人员在使用 OpenAI API 时遇到的挑战在之前的经验研究中尚未被探究。为了填补这一空白,我们通过分析来自流行问答论坛 Stack Overflow 的 2,874 条与 OpenAI API 相关的讨论,进行了第一个全面的经验研究表明。首先,我们评估了这些帖子的受欢迎程度和难度。之后,通过手动将它们归类为九大 OpenAI API 相关类别,并通过主题建模分析识别出每个类别与之相关的具体挑战。基于我们的经验发现,最后我们提出了对开发人员、LLM 供应商和研究人员的具体建议。