1.一种血液疾病智能诊疗辅助系统,其特征在于,包括:
图像采集模块,用于采集瑞氏染色骨髓图像;
图像尺寸放缩模块,用于对所述瑞氏染色骨髓图像进行线性放缩以得到放缩后瑞氏染色骨髓图像;
细胞对象语义分割模块,用于将所述放缩后瑞氏染色骨髓图像输入细胞对象粒度分割器以得到骨髓细胞感兴趣区域图像的集合;
识别对象挑选模块,用于从所述骨髓细胞感兴趣区域图像的集合中挑选待识别骨髓细胞感兴趣区域图像;
骨髓细胞形态语义提取模块,用于将所述待识别骨髓细胞感兴趣区域图像输入细胞形态特征提取器以得到骨髓细胞形态语义特征向量;
细胞结构语义特征提取模块,用于将所述待识别骨髓细胞感兴趣区域图像输入细胞结构特征提取器以得到细胞结构语义特征图;
细胞形态-结构跨模态联合编码模块,用于将所述细胞结构语义特征图和所述骨髓细胞形态语义特征向量输入基于形态辅助的异构Transformer跨域联合编码器以得到细胞形态-结构融合语义特征图作为细胞形态-结构融合语义特征;
细胞类型判断模块,用于基于所述细胞形态-结构融合语义特征,得到识别结果,所述识别结果用于表示细胞类型标签。
2.根据权利要求1所述的血液疾病智能诊疗辅助系统,其特征在于,所述细胞对象语义分割模块,用于:将所述放缩后瑞氏染色骨髓图像输入基于Faster-RNN网络的细胞对象粒度分割器以得到所述骨髓细胞感兴趣区域图像的集合。
3.根据权利要求2所述的血液疾病智能诊疗辅助系统,其特征在于,所述骨髓细胞形态语义提取模块,用于:将所述待识别骨髓细胞感兴趣区域图像输入基于多层卷积结构的细胞形态特征提取器以得到所述骨髓细胞形态语义特征向量。
4.根据权利要求3所述的血液疾病智能诊疗辅助系统,其特征在于,所述细胞结构语义特征提取模块,用于:将所述待识别骨髓细胞感兴趣区域图像输入基于空洞卷积神经网络模型的细胞结构特征提取器以得到所述细胞结构语义特征图。
5.根据权利要求4所述的血液疾病智能诊疗辅助系统,其特征在于,所述细胞形态-结构跨模态联合编码模块,包括:骨髓细胞形态语义特征线性变换形状重塑单元,用于对所述骨髓细胞形态语义特征向量进行线性变换和特征形状重塑以得到骨髓细胞形态语义调制矩阵;
细胞结构语义特征线性变换单元,用于对所述细胞结构语义特征图进行第一线性变换和第二线性变换以得到第一线性变换细胞结构语义特征图和第二线性变换细胞结构语义特征图;
细胞结构语义特征形状重塑单元,用于对所述第一线性变换细胞结构语义特征图和所述第二线性变换细胞结构语义特征图进行特征形状重塑以得到第一线性变换细胞结构语义特征矩阵和第二线性变换细胞结构语义特征矩阵;
骨髓细胞形态语义注意力计算单元,用于以所述第一线性变换细胞结构语义特征矩阵和所述第二线性变换细胞结构语义特征矩阵为键矩阵和值矩阵且以所述骨髓细胞形态语义调制矩阵作为查询矩阵,将所述查询矩阵、所述键矩阵和所述值矩阵输入Transformer结构以得到骨髓细胞形态语义注意力查询细胞结构语义矩阵;
骨髓细胞形态语义特征编码单元,用于对所述骨髓细胞形态语义注意力查询细胞结构语义矩阵进行形状重塑和点卷积编码以得到骨髓细胞形态语义注意力查询细胞结构语义特征图;
细胞形态-结构融合语义特征生成单元,用于将所述骨髓细胞形态语义注意力查询细胞结构语义特征图与所述细胞结构语义特征图进行按位置点乘以得到所述细胞形态-结构融合语义特征图。
6.根据权利要求5所述的血液疾病智能诊疗辅助系统,其特征在于,所述骨髓细胞形态语义特征线性变换形状重塑单元,用于:将所述骨髓细胞形态语义特征向量与细胞形态调制矩阵进行矩阵相乘以得到骨髓细胞形态语义调制向量后,将所述骨髓细胞形态语义调制向量与细胞形态偏置向量进行按位置相加以得到骨髓细胞形态语义调制偏置向量;
将所述骨髓细胞形态语义调制偏置向量输入Sigmoid函数进行激活处理以得到骨髓细胞形态语义调制激活向量;
对所述骨髓细胞形态语义调制激活向量进行形状重塑以得到所述骨髓细胞形态语义调制矩阵。
7.根据权利要求6所述的血液疾病智能诊疗辅助系统,其特征在于,所述细胞结构语义特征线性变换单元,用于:将所述细胞结构语义特征图中沿通道维度的各个特征矩阵与第一细胞结构调制矩阵进行按位置相乘后与第一细胞结构偏置矩阵进行按位置相加以得到第一细胞结构语义偏置特征图;
将所述第一细胞结构语义偏置特征图输入所述Sigmoid函数进行激活处理以得到所述第一线性变换细胞结构语义特征图;
将所述细胞结构语义特征图中沿通道维度的各个特征矩阵与第二细胞结构调制矩阵进行按位置相乘后与第二细胞结构偏置矩阵进行按位置相加以得到第二细胞结构语义偏置特征图;
将所述第二细胞结构语义偏置特征图输入所述Sigmoid函数进行激活处理以得到所述第二线性变换细胞结构语义特征图。
8.根据权利要求7所述的血液疾病智能诊疗辅助系统,其特征在于,所述骨髓细胞形态语义注意力计算单元,用于:计算所述骨髓细胞形态语义调制矩阵的转置矩阵与所述第一线性变换细胞结构语义特征矩阵之间的矩阵乘积后输入softmax函数以得到细胞形态-细胞结构特征关联矩阵;
将所述细胞形态-细胞结构特征关联矩阵作为权重矩阵,计算所述权重矩阵与所述第二线性变换细胞结构语义特征矩阵之间的矩阵乘积以得到所述骨髓细胞形态语义注意力查询细胞结构语义矩阵。
9.根据权利要求8所述的血液疾病智能诊疗辅助系统,其特征在于,所述细胞类型判断模块,用于:将所述细胞形态-结构融合语义特征图输入基于分类器的识别器以得到所述识别结果,所述识别结果用于表示细胞类型标签。
10.一种血液疾病智能诊疗辅助方法,其特征在于,包括:
采集瑞氏染色骨髓图像;
对所述瑞氏染色骨髓图像进行线性放缩以得到放缩后瑞氏染色骨髓图像;
将所述放缩后瑞氏染色骨髓图像输入细胞对象粒度分割器以得到骨髓细胞感兴趣区域图像的集合;
从所述骨髓细胞感兴趣区域图像的集合中挑选待识别骨髓细胞感兴趣区域图像;
将所述待识别骨髓细胞感兴趣区域图像输入细胞形态特征提取器以得到骨髓细胞形态语义特征向量;
将所述待识别骨髓细胞感兴趣区域图像输入细胞结构特征提取器以得到细胞结构语义特征图;
将所述细胞结构语义特征图和所述骨髓细胞形态语义特征向量输入基于形态辅助的异构Transformer跨域联合编码器以得到细胞形态-结构融合语义特征图作为细胞形态-结构融合语义特征;
基于所述细胞形态-结构融合语义特征,得到识别结果,所述识别结果用于表示细胞类型标签。