LLM2D
基于小型语言模型的移动健康事件高效个性化预测
Efficient and Personalized Mobile Health Event Prediction via Small Language Models
作者: Xin Wang, Ting Dang, Vassilis Kostakos, Hong Jia
发布日期: 10/1/2024
arXiv ID: oai:arXiv.org:2409.18987v1

摘要

医疗保健监测对于早期检测、及时干预和持续管理健康状况至关重要,最终可以提高个人的生活质量。最近的研究表明,大型语言模型 (LLM) 在支持医疗保健任务方面展现出令人印象深刻的性能。然而,现有的基于 LLM 的医疗保健解决方案通常依赖于云端系统,这引发了隐私问题,并增加了个人信息泄露的风险。因此,人们越来越关注在移动电话和可穿戴设备等设备上本地运行这些模型以保护用户隐私。小型语言模型 (SLM) 可能是解决隐私和计算问题的潜在候选者,因为它们更有效,更适合本地部署。然而,SLM 在医疗保健领域的性能尚未得到研究。本文考察了 SLM 准确分析健康数据(如步数、卡路里、睡眠分钟数和其他重要统计数据)的能力,以评估个人的健康状况。我们的结果表明,TinyLlama 拥有 11 亿个参数,使用 4.31 GB 内存,延迟为 0.48 秒,在各种医疗保健应用中表现出比其他四个最先进 (SOTA) SLM 更好的性能。我们的结果表明,SLM 可以潜在地部署在可穿戴设备或移动设备上,用于实时健康监测,为高效且保护隐私的医疗保健提供切实可行的解决方案。