LLM2D
SSFF:通过增强可解释性和性能的多代理框架探究LLM在创业成功预测中的能力
SSFF: Investigating LLM Predictive Capabilities for Startup Success through a Multi-Agent Framework with Enhanced Explainability and Performance
作者: Xisen Wang, Yigit Ihlamur, Fuat Alican
发布日期: 4/22/2025
arXiv ID: oai:arXiv.org:2405.19456v2

摘要

arXiv:2405.19456v2 宣告类型:替换 摘要:基于LLM的代理最近在自动化复杂任务方面展现了强大的潜力,但准确预测初创公司成功仍然是一项具有挑战性的任务,缺乏基准和定制框架。为了解决这些问题,我们提出了初创公司成功预测框架(Startup Success Forecasting Framework),这是一个通过多代理协作模型模拟风险投资分析师推理的自主系统。该框架将传统的机器学习方法,如随机森林和神经网络,整合到一个由三个相互连接的模块组成的检索增强生成框架中:预测模块、分析模块和外部知识模块。我们评估了该框架,并得出了三个主要发现。首先,通过利用创始人细分,由L5创始人领导的初创公司比由L1创始人领导的初创公司成功几率高3.79倍。其次,基线大规模语言模型在预测初创公司成功方面始终保持高估,并且在现实类比例不平衡的情况下难以应对,主要原因是过度依赖创始人的声明。第三,我们的框架显着提高了预测准确性,相对于GPT 4o mini,相对改进率为108.3%,相对于GPT 4o,相对改进率为30.8%。这些结果展示了结合区分性机器学习的多代理方法在缓解基于大型语言模型的预测方法限制方面的价值。