1.一种胃肠外科手术辅助系统,其特征在于,包括:
胃肠CT扫描图像获取模块,用于获取目标患者对象的胃肠CT扫描图像;
CT扫描图像预处理模块,用于对所述胃肠CT扫描图像进行图像降噪和对比度增强以得到胃肠CT扫描增强图像;
CT扫描图像特征提取模块,用于对所述胃肠CT扫描增强图像进行语义编码和边界特征提取以得到胃肠CT扫描主干语义编码特征和胃肠CT扫描边界特征语义编码特征;
CT扫描图像多尺度特征融合模块,用于对所述胃肠CT扫描主干语义编码特征和所述胃肠CT扫描边界特征语义编码特征进行主干-边界细粒度强化交互以得到胃肠CT扫描多尺度语义强化融合编码特征;其中,所述CT扫描图像多尺度特征融合模块,包括:CT特征解离单元,用于对所述胃肠CT扫描主干语义编码特征和所述胃肠CT扫描边界特征语义编码特征进行特征解离以得到胃肠CT扫描主干语义局部特征的集合和胃肠CT扫描边界语义局部特征的集合;CT特征补偿聚合单元,用于对所述胃肠CT扫描主干语义局部特征的集合和所述胃肠CT扫描边界语义局部特征的集合进行细粒度语义特征补偿聚合以得到所述胃肠CT扫描多尺度语义强化融合编码特征;
语义分割模块,用于基于所述胃肠CT扫描多尺度语义强化融合编码特征,得到图像语义分割结果,所述图像语义分割结果包含被标注的肿瘤边界;
其中,所述CT特征补偿聚合单元,包括:
主干-边界细粒度提取子单元,用于将胃肠CT扫描主干语义局部特征矩阵的集合和胃肠CT扫描边界语义局部特征矩阵的集合中每组对应通道维度的胃肠CT扫描主干语义局部特征矩阵和胃肠CT扫描边界语义局部特征矩阵输入基于孪生网络结构的共享语义信息提取模块以得到胃肠CT扫描主干-边界细粒度局部共享语义特征矩阵的集合;
主干-边界语义补偿特征计算子单元,用于对所述胃肠CT扫描主干-边界细粒度局部共享语义特征矩阵的集合进行语义特征补偿以得到胃肠CT扫描主干-边界语义补偿文本语义编码特征矩阵的集合;
主干-边界细粒度特征语义强化子单元,用于基于所述胃肠CT扫描主干-边界语义补偿文本语义编码特征矩阵的集合,对所述胃肠CT扫描主干-边界细粒度局部共享语义特征矩阵的集合进行语义强化以得到胃肠CT扫描多尺度语义强化融合编码特征图作为所述胃肠CT扫描多尺度语义强化融合编码特征。
2.根据权利要求1所述的胃肠外科手术辅助系统,其特征在于,所述CT扫描图像特征提取模块,用于:将所述胃肠CT扫描增强图像输入主干网络和边界特征提取分支的双分支边界信息流失补偿网络以得到胃肠CT扫描主干语义编码特征图作为所述胃肠CT扫描主干语义编码特征和胃肠CT扫描边界特征语义编码特征图作为所述胃肠CT扫描边界特征语义编码特征。
3.根据权利要求2所述的胃肠外科手术辅助系统,其特征在于,所述CT特征解离单元,用于:沿着所述胃肠CT扫描主干语义编码特征图和所述胃肠CT扫描边界特征语义编码特征图的通道维度对所述胃肠CT扫描主干语义编码特征图和所述胃肠CT扫描边界特征语义编码特征图进行特征解离以得到胃肠CT扫描主干语义局部特征矩阵的集合作为所述胃肠CT扫描主干语义局部特征的集合和胃肠CT扫描边界语义局部特征矩阵的集合作为所述胃肠CT扫描边界语义局部特征的集合。
4.根据权利要求3所述的胃肠外科手术辅助系统,其特征在于,所述主干-边界语义补偿特征计算子单元,用于:将所述胃肠CT扫描主干-边界细粒度局部共享语义特征矩阵的集合中的各个胃肠CT扫描主干-边界细粒度局部共享语义特征矩阵分别输入基于大语言模型的语义补偿解码模块以得到胃肠CT扫描主干-边界语义补偿文本描述的集合;
将所述胃肠CT扫描主干-边界语义补偿文本描述的集合中的各个胃肠CT扫描主干-边界语义补偿文本描述分别输入基于文本卷积神经网络模型的语义编码器以得到所述胃肠CT扫描主干-边界语义补偿文本语义编码特征矩阵的集合。
5.根据权利要求4所述的胃肠外科手术辅助系统,其特征在于,所述主干-边界细粒度特征语义强化子单元,用于:将所述胃肠CT扫描主干-边界细粒度局部共享语义特征矩阵的集合和所述胃肠CT扫描主干-边界语义补偿文本语义编码特征矩阵的集合中每组对应的胃肠CT扫描主干-边界细粒度局部共享语义特征矩阵和胃肠CT扫描主干-边界语义补偿文本语义编码特征矩阵输入细粒度语义交互补偿模块以得到胃肠CT扫描主干-边界细粒度局部交互语义强化特征矩阵的集合;
将所述胃肠CT扫描主干-边界细粒度局部交互语义强化特征矩阵的集合沿着通道维度进行聚合以得到所述胃肠CT扫描多尺度语义强化融合编码特征图。
6.根据权利要求5所述的胃肠外科手术辅助系统,其特征在于,所述语义分割模块,用于:对所述胃肠CT扫描多尺度语义强化融合编码特征图进行图像语义分割以得到所述图像语义分割结果,所述图像语义分割结果包含被标注的肿瘤边界。
7.根据权利要求6所述的胃肠外科手术辅助系统,其特征在于,所述语义分割模块,用于:使用基于Softmax函数的图像语义分割器对所述胃肠CT扫描多尺度语义强化融合编码特征图进行处理以得到所述图像语义分割结果,所述图像语义分割结果包含被标注的肿瘤边界。
8.一种胃肠外科手术辅助方法,使用权利要求1所述的胃肠外科手术辅助系统,其特征在于,包括:
获取目标患者对象的胃肠CT扫描图像;
对所述胃肠CT扫描图像进行图像降噪和对比度增强以得到胃肠CT扫描增强图像;
对所述胃肠CT扫描增强图像进行语义编码和边界特征提取以得到胃肠CT扫描主干语义编码特征和胃肠CT扫描边界特征语义编码特征;
对所述胃肠CT扫描主干语义编码特征和所述胃肠CT扫描边界特征语义编码特征进行主干-边界细粒度强化交互以得到胃肠CT扫描多尺度语义强化融合编码特征,包括:对所述胃肠CT扫描主干语义编码特征和所述胃肠CT扫描边界特征语义编码特征进行特征解离以得到胃肠CT扫描主干语义局部特征的集合和胃肠CT扫描边界语义局部特征的集合;对所述胃肠CT扫描主干语义局部特征的集合和所述胃肠CT扫描边界语义局部特征的集合进行细粒度语义特征补偿聚合以得到所述胃肠CT扫描多尺度语义强化融合编码特征;
基于所述胃肠CT扫描多尺度语义强化融合编码特征,得到图像语义分割结果,所述图像语义分割结果包含被标注的肿瘤边界。