arXiv:2504.19443v1 Announce Type: cross 摘要：膝关节骨关节炎（KOA）是一种全世界普遍存在的慢性骨骼肌肉疾病，早期诊断至关重要。目前，Kellgren和Lawrence（KL）分级系统被广泛用于评估KOA的严重程度。然而，其高观察者间变异性以及主观性影响了诊断的一致性。为解决这些限制，近年来已经积极研究使用深度学习的自动化诊断技术。在本研究中，我们提出了一种基于CLIP的框架（CLIP-KOA），以提高KOA分级预测的一致性和可靠性。为此，我们引入了一种综合图像和文本信息的学习方法，并结合对称损失和一致性损失，以确保原始图像和翻转图像之间的预测一致性。CLIP-KOA在KOA严重程度预测任务上达到了71.86%的先进精度，消融研究表明，与标准CLIP模型相比，由于我们的贡献，CLIP-KOA在准确率上提高了2.36%。本研究展示了数据驱动医学预测的一个新方向，不仅提高了精细诊断的可靠性，还探索了多模态方法在医学图像分析中的应用。我们的代码可在https://github.com/anonymized-link 获取。