arXiv:2504.10509v1 类型: cross 摘要：本研究对Zhuang等人提出的集合提示方法在大规模语言模型（LLMs）上进行零样本排名的有效性和可扩展性进行了全面的重现和扩展分析。我们在文档排名任务中评估了其与传统点wise、pairwise和listwise方法相比的有效性和效率。我们的重现确认了Zhuang等人发现的结果，突显了集合方法之间的计算效率与排名效果之间的权衡。基于这些见解，我们引入了集合插入（Setwise Insertion）这一新颖方法，利用初始文档排名作为先验知识，通过关注更有可能改善排名结果的候选对象来减少不必要的比较和不确定性。在多种LLM架构（Flan-T5、Vicuna和Llama）上的实验结果显示，与原始的集合方法相比，集合插入方法可以使查询时间减少31%，模型推理次数减少23%，并略微提高重排名效果。这些发现突显了在集合提示中融入先验排名知识在提高零样本文档重排名效率和准确性方面的实际优势。