LLM2D

针对问答任务微调整个 RAG 架构（包括 DPR 检索器）

Fine-tune the Entire RAG Architecture (including DPR retriever) for Question-Answering

作者: Shamane Siriwardhana, Rivindu Weerasekera, Elliott Wen, Suranga Nanayakkara

发布日期: 10/8/2024

arXiv ID: oai:arXiv.org:2106.11517v1

本文阐述了如何以端到端的方式微调检索增强生成（RAG）架构。我们重点介绍了实现这一目标需要解决的主要工程挑战。我们还比较了端到端 RAG 架构在问答任务中的表现，发现它优于原始 RAG 架构。我们已将我们的实现开源在 HuggingFace Transformers 库中。