LLM2D
基于LLM的代理模拟在母婴健康干预中的应用:不确定性估计与决策导向评估
LLM-based Agent Simulation for Maternal Health Interventions: Uncertainty Estimation and Decision-focused Evaluation
作者: Sarah Martinson, Lingkai Kong, Cheol Woo Kim, Aparna Taneja, Milind Tambe
发布日期: 4/1/2025
arXiv ID: oai:arXiv.org:2503.22719v1

摘要

arXiv:2503.22719v1 宣告类型: 新 摘要:基于代理的仿真对于建模复杂的人类行为至关重要,但传统方法需要大量的领域知识和数据集。在历史和反事实数据有限的数据稀缺医疗保健环境中,大型语言模型(LLMs)通过利用广泛的世界知识提供了有前途的替代方案。本研究探讨了一种基于LLM的母健康移动健康计划的仿真,预测受益人在通过自动消息(控制组)或现场代表(干预组)接收健康信息时的听从行为。由于在健康干预中的决策制定中不确定性量化至关重要,我们提出了一种基于多个样本的二元熵的LLM认知不确定性估计方法。通过集成方法增强模型的稳健性,与单个模型相比,提高了F1分数并提升了模型校准。除了直接评估之外,我们采取了以决策为中心的方法,演示了LLM预测如何在数据稀缺环境中指导干预可行性和试验实施方案。所提出的方法延伸至公共卫生、灾难响应以及其他需要在严重数据限制条件下快速评估干预措施的领域。所有为此工作使用的方法代码和提示均可在 https://github.com/sarahmart/LLM-ABS-ARMMAN-prediction 找到。