1.一种基于自监督对比学习的医学影像分割方法,其特征在于,包括以下步骤:步骤1,获取没有分割标签的患病数据,对每个样本进行数据增强;
步骤2,对数据增强之后的视图使用ViT进行特征提取和映射,之后使用通道数为2的卷积神经网络和softmax层,得到初始的病灶激活图和背景激活图;
步骤3,计算原始图像在三个通道的均值Mi,分别使用上一步得到的初始的病灶激活图d b和背景激活图点乘Mi和1‑Mi,得到低像素的病灶激活图和背景激活图Pi与Pi;
d b
步骤4,对步骤2中ViT得到的特征映射进行矩阵变换,之后同Pi 与Pi 相乘,得到低像素d b病灶特征向量Vi和背景特征向量Vi,使用对比损失进行自监督学习;
步骤5,对步骤2中ViT得到的特征映射进行上采样和矩阵变换,对步骤3得到的低像素d b d的病灶激活图和背景激活图Pi与Pi进行上采样得到高像素的病灶激活图和背景激活图Qib d b与Qi ,之后进行相乘得到高像素病灶特征向量Ui 和背景特征向量Ui ,使用对比损失进行自监督学习;
d
步骤6,对于训练好的模型所得到的高像素的病灶激活图Qi 和原始的图像一同输出到Dense CRF模块中得到最终的分割结果。
2.根据权利要求1所述的基于自监督对比学习的医学影像分割方法,在步骤1中,其特征在于,所述数据增强采用torchvision提供的数据增强工具中的旋转、平移和缩放操作,以消除患病数据中病灶大小、方向和位置无关特征产生的负面影响。
3.根据权利要求1或2所述的基于自监督对比学习的医学影像分割方法,其特征在于,在步骤5中,上采样解码网络使用四层卷积神经网络将特征映射还原至原始大小,其中的网络参数使用重构误差进行训练。
4.根据权利要求3所述的基于自监督对比学习的医学影像分割方法,其特征在于,对低d b像素的病灶激活图和背景激活图Pi与Pi进行双线性插值上采样。
5.根据权利要求1所述的基于自监督对比学习的医学影像分割方法,其特征在于,在步骤4和5中,通过最小化病灶区域和正常区域的相似性以及最大化病灶区域和正常区域内部的相似性对比进行训练,用病灶和正常区域表示之间的语义信息来定位病灶目标区域,分别用负向对比损失Lneg和正向对比损失Lpos两个损失函数来表示。
6.根据权利要求5所述的基于自监督对比学习的医学影像分割方法,其特征在于,对于多张患病图像的病灶区域和正常区域的表示包含不同的语义信息,则病灶区域和正常区域之间的距离很大。
7.根据权利要求6所述的基于自监督对比学习的医学影像分割方法,其特征在于,对于n个样本的患病图像分离出n个病灶区域特征向量和n个正常区域特征向量,对于其中一个d b病灶和正常区域的特征向量对(Vi,Vj),负向对比损失Lneg定义如下:d b
其中, 表示病灶区域特征向量Vi 和正常区域特征向量Vj的相似性,sim()表示余弦相似性。
8.根据权利要求5或7所述的基于自监督对比学习的医学影像分割方法,其特征在于,对于多张患病图像的病灶区域和病灶区域以及正常区域和正常区域之间的距离较小。
9.根据权利要求8所述的基于自监督对比学习的医学影像分割方法,其特征在于,计算病灶区域直接和正常区域之间的余弦相似度如下:d d
其中, 表示样本i的病灶区域特征向量Vi 和样本j的病灶区域特征向量Vj的相似性,b b表示样本i的正常区域特征向量Vi和样本j的正常区域特征向量Vj的相似性,sim()表示余弦相似性;
分别计算病灶区域的正向对比损失 和正常区域的正向对比损失 如下:d d
其中, 表示样本i的病灶区域特征向量Vi 和样本j的病灶区域特征向量Vj的相似性,b b表示样本i的正常区域特征向量Vi和样本j的正常区域特征向量Vj的相似性;
整体的正向对比损失Lpos定义如下:
其中,λ1表示病灶区域的正向对比损失 的权重系数。
10.根据权利要求9所述的基于自监督对比学习的医学影像分割方法,其特征在于,最终的损失函数为低像素的负向对比损失和正向对比损失以及高像素下的对比损失之和,即:其中,L表示模型的最终损失函数,λ2表示负向对比损失 和 的权重系数,表示低像素的负向对比损失, 表示低像素的正向对比损失, 表示高像素的负向对比损失, 表示高像素的正向对比损失。