欢迎来到知嘟嘟! 联系电话:13336804447 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13336804447
知嘟嘟经纪人
收藏
专利号: 2020110838504
申请人: 浙江理工大学
专利类型:发明专利
专利状态:已下证
专利领域: 计算;推算;计数
更新日期:2024-11-18
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.一种基于特征融合与旋转目标检测器的遥感图像识别方法,其特点在于:

将采集到的遥感图像输入到Inception‑Resnet网络进行位置特征的提取,得到五组关键节点特征图,将五组关键节点特征图输入到自动化特征融合网络进行特征信息的自动化融合,得到融合后位置特征图;然后将融合后位置特征图输入RPN网络中得到目标的水平位置,通过水平位置对五组特征图进行裁剪得到裁剪后的特征图,再将裁剪后的特征图输入到旋转目标检测器中,对遥感图像的目标的坐标进行旋转回归,最终得到遥感图像中目标的精确坐标;

所述的自动化特征融合网络为带有强化学习的自动化特征融合网络,自动化特征融合网络主要由多个融合模块Merge Module构成;按照Inception‑Resnet网络中后处理输出的顺序对五组关键节点特征图进行排序:相邻两组关键节点特征图输入到一个融合模块Merge Module处理获得融合后的特征图;先通过四个融合模块Merge Module对五组关键节点特征图的相邻两组分别进行融合处理获得四个第一融合特征图,再通过三个融合模块Merge Module对四个第一融合特征图的相邻两组分别进行融合处理获得三个第二融合特征图,再通过两个融合模块Merge Module对三个第二融合特征图的相邻两组分别进行融合处理获得两个第三融合特征图,再通过一个融合模块Merge Module对两个第三融合特征图分别进行融合处理获得一个第四融合特征图,第四融合特征图作为融合后位置特征图;每个融合模块Merge Module中,包括了最大池化层、第一卷积层和第二卷积层,在输入的相邻两组特征图中,以Inception‑Resnet网络中对应较先处理输出的特征图作为低阶输入特征图,以Inception‑Resnet网络中对应较后处理输出的特征图作为高阶输入特征图;高阶输入特征图经最大池化层后的输出和高阶输入特征图自身进行元素相乘操作获得第一中间特征图,第一中间特征图和高阶输入特征图自身进行元素相加操作后获得第二中间特征图,第二中间特征图和低阶输入特征图分别经第一卷积层、第二卷积层处理后再经元素相乘操作获得第三中间特征图,第三中间特征图和和高阶输入特征图自身进行元素相加操作后输出融合后的特征图。

2.根据权利要求1所述的一种基于特征融合与旋转目标检测器的遥感图像识别方法,其特征在于:

所述的Inception‑Resnet网络中主要由5个残差网络A模块、1个还原模块A、10个残差网络B模块、1个还原模块B和5个残差网络C模块构成;选取残差网络A模块的第5层卷积层、还原模块A的输出层、残差网络B模块的第10层卷积层、还原模块B的输出层、残差网络C模块的第5层卷积层作为关键节点,采集获得五个关键节点的输出作为五组关键节点特征图,五组关键节点特征图尺寸归一化后输入自动化搜索网络进行特征融合。

3.根据权利要求1所述的一种基于特征融合与旋转目标检测器的遥感图像识别方法,其特征在于:

所述的RPN网络和旋转目标检测器相融合连接,具体拓扑结构包括第三卷积层、四个第四卷积层、第五卷积层、两次通道数转换Reshape、归一化指数函数softmax、区域候选proposal、感兴趣区域池化模块、位置坐标回归和目标类型回归;

融合后位置特征图分别输入到第三卷积层和感兴趣区域池化模块中,第三卷积层的输出分别输入到四个第四卷积层,其中第一个第四卷积层的输出经通道数转换Reshape操作后和第二个第四卷积层的输出一起输入到归一化指数函数softmax,归一化指数函数softmax的输出再依次经通道数转换Reshape、区域候选proposal后输入到感兴趣区域池化模块,感兴趣区域池化模块对输入的融合后位置特征图进行剪裁,剪裁结果分别进行位置坐标的回归、目标类型的回归,获得裁剪后特征图,然后将裁剪后特征图输入到旋转目标检测器中;第三个第四卷积层的输出经第五卷积层处理后和第四个第四卷积层的输出一起输入到相加层进行像素相加操作获得融合特征图,然后将融合特征图图也输入到旋转目标检测器中;经旋转目标检测器处理输出最终的带有目标位置坐标和类型的标注图像结果。

4.根据权利要求1所述的一种基于特征融合与旋转目标检测器的遥感图像识别方法,其特征在于:所述的旋转目标检测器处理过程中,输出目标位置坐标和类型的预测框,在训练时,预测框和实际框之间建立以下公式的旋转目标的交并比计算函数 ,如下:其中, 与 为第一、第

二参数变量; 表示求导后的比值IOU,比值IOU表示预测框和实际框求交集的面积与预测框和实际框求并集的面积的比值,表示旋转角度因子。