arXiv:2504.02894v1 宣告类型: cross 摘要: 大型语言模型（LLMs）已被广泛用于各种任务和应用中。然而，LLMs 和微调仅限于预训练数据。例如，ChatGPT的世界知识截至2021年可能已经过时或不准确。为了增强LLMs的能力，Retrieval-Augmented Generation (RAG) 提出了利用额外的新鲜、最新的细节和信息来增强LLMs。虽然RAG提供了正确的信息，但它可能无法以最佳方式呈现，尤其是对于具有个性化需求的不同人群群体。通过反馈循环调整模型响应以与人类偏好相一致的强化学习从人类反馈（RLHF）能够根据用户需求进行调整。在实际应用中，如心理健康问题，动态且基于反馈的模型会不断适应新信息，并提供个性化的帮助，因为日常环境中复杂因素不断波动。因此，我们提出了一种基于在线强化学习的Retrieval-Augmented Generation（OnRL-RAG）系统，以检测和个性化针对心理健康问题（如压力、焦虑和抑郁）的响应系统。我们使用从2028年大学学生收集的数据集，每个学生有28个调查问题，来演示我们提出系统的性能与现有系统的性能。我们的系统在标准RAG和简单LLM（通过GPT-4o、GPT-4o-mini、Gemini-1.5和GPT-3.5）中表现出更优的性能。这项工作将为LLMs在日常环境中的个性化服务的实际应用打开新的可能性。研究结果还将帮助社会学、心理学和神经科学领域的研究人员将其理论与实际人类日常环境更紧密地结合起来。