本研究介绍了Purrfessor，一款创新的AI聊天机器人，旨在通过交互式多模态互动提供个性化的饮食指导。Purrfessor利用经过食物和营养数据微调的大型语言和视觉助手(LLaVA)模型以及人机协同方法，将视觉膳食分析与情境化建议相结合，以增强用户体验和参与度。我们进行了两项研究来评估聊天机器人的性能和用户体验：(a) 进行了模拟评估和人工验证，以检验微调模型的性能；(b)一项2（角色：机器人与宠物）x 3（模型：GPT-4与LLaVA与微调LLaVA）实验表明，与GPT-4机器人相比，Purrfessor显著增强了用户对关怀的感知（β=1.59，p=0.04）和兴趣（β=2.26，p=0.01）。此外，用户访谈强调了交互设计细节的重要性，强调了响应性、个性化和指导对于提高用户参与度的必要性。