摘要
arXiv:2504.00299v1 宣告类型: 新
摘要: 对文档进行数值推理,既需要上下文理解,又需要逻辑推理,对于部署在计算能力受限设备上的低能力本地模型来说是一个挑战。尽管这些复杂的推理查询可以路由到强大的远程模型,如GPT-4,但这会引发显著的数据泄露问题。现有的缓解方法生成问题描述或示例以供远程协助。然而,数值推理的固有复杂性阻碍了本地模型生成逻辑等效的查询,并在远程指导下准确推理答案的能力。在这篇文章中,我们提出了一种模型协作框架,包含两个关键创新:(1) 一种上下文感知的合成策略,该策略在保持逻辑一致性的同时转移查询领域;以及(2) 一种工具基础的答案重构方法,该方法使用代码片段重用远程生成的问题解决模式。实验结果表明,我们的方法在仅使用本地模型时实现了更好的推理准确性,同时提供了比完全依赖远程模型更强的数据保护。此外,与现有的数据保护方法相比,我们的方法在提高准确性方面达到16.2%至43.6%的增长,同时减少数据泄露2.3%至44.6%。