摘要
arXiv:2502.12929v1 类型: cross
摘要: 我们提出了一种名为Flow-of-Options (FoO) 的新颖推理方法,旨在解决大型语言模型 (LLMs) 内在的偏差问题。FoO 让LLMs能够系统地探索其推理中多样化的可能性,这一能力通过基于FoO的自主解决机器学习任务的代理系统(AutoML)得到了展示。我们的框架在标准数据科学任务上优于最先进的基准方法,实现了38.2% - 69.2%的性能提升,在治疗化学任务上则达到了37.4% - 47.9%的提升。凭借每任务操作成本低于1美元,我们的框架非常适合成本敏感的应用。除了分类和回归之外,我们还展示了基于FoO的代理系统在强化学习和图像生成等任务中的广泛适用性。与当前最先进的AutoML代理系统相比,我们的框架展示了显着的改进,这得益于FoO在通过压缩和可解释表示强制多样性,以及结合案例推理时支持长期记忆方面的优势。