无监督领域自适应仍然是实现模型跨未知领域知识迁移的关键挑战。现有的方法难以平衡对领域不变表示的需求和保留领域特定特征的需求，这通常是由于对齐方法在潜在空间中强加了语义相似的样本的投影靠近，尽管它们存在巨大的领域差异。我们引入了\mnamelong，这是一种新方法，它将重点从对齐绝对坐标中的表示转移到对齐潜在空间中等效概念的相对位置。\mname在语言空间中定义了关于类别标签之间语义/几何关系的领域无关结构，并指导自适应过程，确保视觉空间中样本的组织反映参考类间关系，同时保留领域特定特征。我们在四个不同的图像和视频数据集上实证证明了\mname在领域自适应任务中的优越性。值得注意的是，\mname在四个不同的图像和视频数据集的18个不同的自适应场景中超越了以前的工作，在DomainNet上的平均准确率提高了+3.32%，在GeoPlaces上提高了+5.75%，在GeoImnet上提高了+4.77%，在EgoExo4D上平均类别准确率提高了+1.94%。