1.一种基于十字交叉注意力的高分辨率遥感影像变化检测方法,其特征在于,包括以下步骤:步骤1:采集高分辨率遥感影像变化检测影像对和其对应的二值语义分割标签,得到高分辨率遥感影像变化检测数据集,获取同一地区两时相影像数据和地物变化标签数据;
步骤2:将高分辨率遥感影像变化检测数据集划分为训练集、验证集和测试集,对训练集数据进行数据增强;
步骤3:构建变化检测模型,所述变化检测模型包括编码器、时空注意力模块和解码器;
步骤4:将训练集数据输入变化检测模型中编码器进行特征提取,获取相邻两时相多尺度地物特征图 、 ,所述编码器为去除最后池化层和全连接层的ESNET模型;
步骤5:将多尺度地物特征图 、 输入时空注意力模块,所述时空注意力模块包括十字交叉空间注意力模块和十字交叉时间注意力模块;
先将多尺度地物特征图 、 分别通过十字交叉空间注意力模块获取精化空间信息的多尺度空间特征图 、 ;
再将精化空间信息的多尺度空间特征图 、 分别通过十字交叉时间注意力模块聚合横纵方向上和时空方向上的像素,得到特征 、 ;
步骤6:将特征 、 通过金字塔池化模块处理,再通过双线性内插将宽高拉伸至和标签相同的尺寸,得到变化地物分割图,通过最小化最终张量和标签的损失训练该模型,并获取训练完成的变化检测模型;
步骤7:将测试集数据输入到训练完成的变化检测模型,获取检测结果。
2.根据权利要求1所述的基于十字交叉注意力的高分辨率遥感影像变化检测方法,其特征在于,所述数据增强方式包括:随机翻转、随机旋转、随机透明、HSV转变、随机噪声、随机交换两幅影像顺序。
3.根据权利要求1所述的基于十字交叉注意力的高分辨率遥感影像变化检测方法,其特征在于,所述将多尺度地物特征图 、 分别通过十字交叉空间注意力模块获取对应的精化空间信息的多尺度空间特征图 、 的具体方式如下:将多尺度地物特征图通过三个1 x 1卷积层获取空间维度张量 、 、 ,其中,, 是特征的通道数, 表示全体实数集, 表示特征的宽度, 表示特征的高度;
计算空间维度张量 、 的相似度 ,将softmax函数应用于得到空间注意力权重矩阵 ,所述softmax函数指归一化指数函数将数字映射为0到1的数字;
所述相似度 为空间维度张量 、 第 标量值位置 的相似度 的集合,其中, ;
其中, 表示空间维度张量 在每个位置 上可以得到的向量, ; 表示第标量值的向量 ,所述向量 表示空间维度张量 对应于位置 横纵方向上的向量, ;
将空间维度张量 和空间注意力权重矩阵 进行聚合,具体公式如下:其中, 是位置 上的特征 , 是位置 第 个标量值的空间注意力权重矩阵 , 是位置 第 个标量值的向量 ,所述向量 为空间维度张量 对应于位置的横纵方向上的向量, , 是位置 的向量 ;
获取每个位置 的特征 得到特征 ,并将特征 再次作为初始特征输入十字交叉空间注意力模块获取精化空间信息的多尺度空间特征图。
4.根据权利要求3所述的基于十字交叉注意力的高分辨率遥感影像变化检测方法,其特征在于,所述将精化空间信息的多尺度空间特征图 、 分别通过十字交叉时间注意力模块聚合横纵方向上和时空方向上的像素,得到特征 、 的具体方式如下:将精化空间信息的多尺度空间特征图 通过两个不同的1 x 1卷积层得到空间维度张量 、 ;将精化空间信息的多尺度空间特征图 通过两个不同的1 x 1卷积层得到空间维度张量 、 ;其中, , ;
计算 和 的相似度 ,将softmax函数应用于 获得时间注意力矩阵 ;
所述相似度 为空间维度张量 和 第 标量值位置 的相似度 的集合,
,
其中, 表示空间维度张量 在每个位置 上的向量, , 表示第标量值的向量 ,其中, 表示空间维度张量 对应于位置 横纵方向上的向量;
将空间维度张量 、 分别与空间注意力权重矩阵 进行聚合,具体公式如下:,
,
其中, 是位置 上的特征 , 是位置 第 个标量值的空间注意力权重矩阵 , 是位置 第 个标量值的向量 ,所述向量 为空间维度张量 对应于位置 的横纵方向上的向量, , 是位置 的向量 ;
是位置 上的特征 , 是位置 第 个标量值的向量 ,所述向量 为空间维度张量 对应于位置 的横纵方向上的向量, , 是位置 的向量 ;
获取每个位置 的特征 得到特征 ,获取每个位置 的特征 得到特征 ,并将特征 、 再次作为初始特征输入十字交叉时间注意力模块获取特征 、 ;
对特征 、 简单的绝对值求差获取精化多尺度变化特征图。
5.根据权利要求1所述的基于十字交叉注意力的高分辨率遥感影像变化检测方法,其特征在于,所述金字塔池化模块包括3个尺度的卷积层、批标准化层、修正线性单元,将这三层相连形成ConvBNReLU模块;
对输入的精化多尺度变化特征图分别经过ConvBNReLU模块,然后采用双线性插值进行上采样,来获得金字塔模块前相同尺寸的特征图,并在通道上进行拼接;之后再经过一个ConvBNReLU模块获得形状为(N,2,W,H)的特征,经过argmax函数后输出变化检测二值分割图。
6.一种基于十字交叉注意力的高分辨率遥感影像变化检测的装置,包括处理器和存储有程序指令的存储器,其特征在于,所述处理器被配置为在运行所述程序指令时,执行如权利要求1至5任一项所述的基于十字交叉注意力的高分辨率遥感影像变化检测方法。
7.一种存储介质,存储有程序指令,其特征在于,所述程序指令在运行时,执行如权利要求1至5任一项所述的基于十字交叉注意力的高分辨率遥感影像变化检测方法。