摘要
大型语言模型(LLMs)已从基于文本的系统快速发展为多模态平台,对包括医疗保健在内的各个领域产生了重大影响。这篇全面的综述探讨了 LLMs 向多模态大型语言模型 (MLLMs) 的发展及其在医疗实践中日益增长的影响力。我们考察了 MLLMs 在医疗保健领域的现状,分析了它们在临床决策支持、医学影像、患者参与和研究中的应用。该综述强调了 MLLMs 在整合多种数据类型(如文本、图像和音频)方面的独特能力,从而为患者健康提供更全面的见解。我们还讨论了 MLLM 实施面临的挑战,包括数据限制、技术障碍和伦理考量。通过识别关键的研究差距,本文旨在指导未来在数据集开发、模态对齐方法以及建立伦理指南等领域的调查。随着 MLLMs 继续塑造医疗保健的未来,了解其潜力和局限性对于将其负责任且有效地整合到医疗实践中至关重要。