摘要
arXiv:2410.14567v3 宣告类型: 替换-交叉
摘要:大型语言模型(LLMs)在对话式AI系统中广泛用于生成对用户查询的响应。然而,许多自然问题缺乏明确的答案。现有研究主要集中在虚假前提这类问题上,但往往忽略了范围内问题(out-of-scope questions),即提供的文档在语义上与查询非常相似,但并不包含所需的答案。在本文中,我们提出了一种指导式的幻觉方法,以高效地从给定文档集合中生成多样化的范围内问题。然后,我们根据LLMs在混淆检测和适当响应生成方面的有效性进行评估。此外,我们介绍了一种改进的检测范围内问题的方法,增强了基于LLM的问题回答系统的可靠性。