LLM2D
SelfElicit: 你的语言模型秘密知道哪些是相关证据
SelfElicit: Your Language Model Secretly Knows Where is the Relevant Evidence
作者: Zhining Liu, Rana Ali Amjad, Ravinarayana Adkathimar, Tianxin Wei, Hanghang Tong
发布日期: 2/14/2025
arXiv ID: oai:arXiv.org:2502.08767v1

摘要

arXiv:2502.08767v1 类型: cross 摘要:向语言模型(LMs)提供相关证据(通过检索或用户提供的证据)可以在上下文中显著提高它们提供事实准确且具有一致性的回答的能力。然而,最近的研究发现,LMs 在理解并利用上下文中的关键证据方面遇到了困难,尤其是在包含噪声和无关信息的情况下,而这种问题在现实世界中很常见。为了解决这个问题,我们提出了 SelfElicit,这是一种在推理时帮助LMs集中关注关键上下文证据的方法,通过自我引导的明确强调。通过利用LMs较深层的注意力分数来发挥其固有的证据查找能力,我们的方法可以自动识别并强调输入上下文中的关键证据,从而在无需额外训练或迭代提示的情况下促进更准确和具有一致性的回答。我们展示了 SelfElicit 在多种基于证据的问答任务中为各种LM家族带来了一致且显著的改进,同时保持了计算效率。我们的代码和文档可在 https://github.com/ZhiningLiu1998/SelfElicit 获取。