arXiv:2409.12979v1 公告类型: 交叉 摘要: 目前，提示技术主要可分为两大类：1) 示例方法通过模仿给定示例中的步骤，隐式地启发模型回答问题，例如少样本思维链（few-shot CoT）。2) 指南方法通过遵循指南明确指导模型推理，这些指南包含简洁且具体的任务知识。示例方法在选择示例类型、示例数量和推理步骤设计方面容易遇到困难，因此产生了一个问题：我们能否仅使用指南而非示例来构建提示？为此，我们提出了FGT框架，该框架通过包含反馈、指南和树聚合代理的数据集自动学习任务特定的指南。首先，反馈代理被设计用于评估每个问答的正确与错误结果，以收集见解指导更有效的优化策略。其次，指南代理负责从每条反馈中推导出指南并将其存储在本地内存中。最后，树聚合代理通过树结构层次化地聚合所有指南，最终从全局视角获得所有不重复的指南。此外，我们引导模型生成中间过程以确保推理与指南一致。实验结果表明，我们的方法在多个任务中实现了卓越的性能，从而突显了在提示中使用指南的有效性。