LLM2D
用于医学图像密集对比表示学习中的假阳性与假阴性问题的同胚先验
Homeomorphism Prior for False Positive and Negative Problem in Medical Image Dense Contrastive Representation Learning
作者: Yuting He, Boyu Wang, Rongjun Ge, Yang Chen, Guanyu Yang, Shuo Li
发布日期: 2/11/2025
arXiv ID: oai:arXiv.org:2502.05282v1

摘要

arXiv:2502.05282v1 宣布类型: cross 摘要: 密集对比表示学习(DCRL)极大地提高了图像密集预测任务的学习效率,展示了其在降低医疗图像采集和密集标注成本方面的巨大潜力。然而,医疗图像的特性导致了不可靠对应关系的发现,这在DCRL中带来了大规模误匹配和正匹配(FP&N)对的开放问题。在本文中,我们提出了一种GEoMetric vIsual deNse sImilarity (GEMINI)学习方法,该方法嵌入了同胚先验到DCRL中,并能够进行可靠的对应关系发现以实现有效的密集对比。我们提出了可形变同胚学习(DHL),该方法建模了医疗图像的同胚性,并学习估计一个形变量映射,以在拓扑不变性的条件下预测像素的对应关系。它有效减少了配对搜索空间,并通过梯度驱动隐式和软学习负配对。我们还在特征中提取语义信息来构建几何语义相似性(GSS),以衡量对应关系学习的对齐程度。这将促进形变的学习效率和性能,可靠地构造正面配对。我们在实验中在两种典型的表示学习任务上实现了两个实用的变体。我们在这七个数据集上的有希望的结果优于现有方法,显示了我们在各个方面都具有明显的优势。我们将在伴侣链接上发布我们的代码:https://github.com/YutingHe-list/GEMINI。