LLM2D
交互式推测规划:通过系统和用户界面协同设计提升智能体效率
Interactive Speculative Planning: Enhance Agent Efficiency through Co-design of System and User Interface
作者: Wenyue Hua, Mengting Wan, Shashank Vadrevu, Ryan Nadel, Yongfeng Zhang, Chi Wang
发布日期: 10/2/2024
arXiv ID: oai:arXiv.org:2410.00079v1

摘要

作为以用户为中心的工具,代理越来越多地被用于人类任务委托,通过生成想法、与用户代理互动以及制定行动计划来协助各种请求。然而,基于大型语言模型 (LLMs) 的代理通常面临着巨大的规划延迟,这主要归因于两个因素:基础 LLMs 由于其庞大规模和高需求而存在的效率限制,以及代理由于生成大量中间想法以产生最终输出而导致的结构复杂性。鉴于服务提供效率低下会损害自动化对用户的价值,本文提出了一种以人为中心的有效代理规划方法——交互式推测规划——旨在通过系统设计和人机交互来提高代理规划的效率。我们的方法主张共同设计代理系统和用户界面,强调了能够流畅地管理用户交互和中断的代理系统的必要性。通过将人类中断作为系统的一个基本组成部分,我们不仅使其更加以用户为中心,而且还通过利用人机交互来提供准确的中间步骤,从而加速整个过程。代码和数据将发布。