欢迎来到知嘟嘟! 联系电话:13336804447 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13336804447
知嘟嘟经纪人
收藏
专利号: 2024115587731
申请人: 广东医科大学
专利类型:发明专利
专利状态:已下证
专利领域: 计算;推算;计数
更新日期:2026-11-16
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.一种基于主辅编码交互补偿的红外与可见光图像融合方法,其特征在于,包括以下步骤:采集可见光图像以及红外光图像;

对所述可见光图像以及所述红外光图像进行主特征提取,得到多层次的可见光主特征以及多层次的红外光主特征;

对所述可见光图像以及所述红外光图像进行辅助特征提取,得到多层次的可见光辅助特征以及多层次的红外光辅助特征;

对多层次的所述可见光主特征与多层次的所述可见光辅助特征进行级联交互,得到目标可见光特征;

对多层次的所述红外光主特征与多层次的所述红外光辅助特征进行级联交互,得到目标红外光特征;

根据所述目标可见光特征以及所述目标红外光特征,生成初始融合图像;

根据所述可见光图像以及所述红外光图像,构造目标损失函数;

根据所述目标损失函数,对所述初始融合图像进行调整,得到目标融合图像。

2.根据权利要求1所述的一种基于主辅编码交互补偿的红外与可见光图像融合方法,其特征在于,所述对所述可见光图像以及所述红外光图像进行主特征提取,得到多层次的可见光主特征以及多层次的红外光主特征,包括以下步骤:通过可见光主编码器,对所述可见光图像进行特征提取,得到多层次的所述可见光主特征;

通过红外光主编码器,对所述红外光图像进行特征提取,得到多层次的所述红外光主特征。

3.根据权利要求1所述的一种基于主辅编码交互补偿的红外与可见光图像融合方法,其特征在于,所述对所述可见光图像以及所述红外光图像进行辅助特征提取,得到多层次的可见光辅助特征以及多层次的红外光辅助特征,包括以下步骤:通过可见光辅助编码器,对所述可见光图像进行特征提取,得到多层次的所述可见光辅助特征;

通过红外光辅助编码器,对所述红外光图像进行特征提取,得到多层次的所述红外光辅助特征。

4.根据权利要求1所述的一种基于主辅编码交互补偿的红外与可见光图像融合方法,其特征在于,所述对多层次的所述可见光主特征与多层次的所述可见光辅助特征进行级联交互,得到目标可见光特征,包括以下步骤:将当前层的所述可见光主特征与前若干层的所述可见光主特征以及对应层的所述可见光辅助特征进行级联交互,得到所述目标可见光特征。

5.根据权利要求1所述的一种基于主辅编码交互补偿的红外与可见光图像融合方法,其特征在于,所述对多层次的所述红外光主特征与多层次的所述红外光辅助特征进行级联交互,得到目标红外光特征,包括以下步骤:将当前层的所述红外光主特征与前若干层的所述红外光主特征以及对应层的所述红外光辅助特征进行级联交互,得到所述目标红外光特征。

6.根据权利要求1所述的一种基于主辅编码交互补偿的红外与可见光图像融合方法,其特征在于,所述根据所述目标可见光特征以及所述目标红外光特征,生成初始融合图像,包括以下步骤:对所述目标可见光特征以及所述目标红外光特征进行强化融合,得到融合特征;

根据所述融合特征,生成所述初始融合图像。

7.根据权利要求1所述的一种基于主辅编码交互补偿的红外与可见光图像融合方法,其特征在于,所述根据所述可见光图像以及所述红外光图像,构造目标损失函数,包括以下步骤:根据所述可见光图像以及所述红外光图像,获取所述红外光图像的强度权重系数;

获取所述可见光图像的第一梯度信息;

获取所述红外光图像的第二梯度信息;

根据所述第一梯度信息以及所述第二梯度信息,获取所述可见光图像的梯度权重系数;

根据所述强度权重系数以及所述梯度权重系数,构建所述目标损失函数。

8.根据权利要求7所述的一种基于主辅编码交互补偿的红外与可见光图像融合方法,其特征在于,所述根据所述强度权重系数以及所述梯度权重系数,构建所述目标损失函数,包括以下步骤:根据所述强度权重系数、所述可见光图像以及所述红外光图像,构造红外强度损失函数;

根据所述梯度权重系数、所述第一梯度信息以及所述第二梯度信息,构造可见光损失函数;

根据所述红外强度损失函数以及所述可见光损失函数,得到所述目标损失函数。

9.一种基于主辅编码交互补偿的红外与可见光图像融合装置,其特征在于,包括:第一模块,用于采集可见光图像以及红外光图像;

第二模块,用于对所述可见光图像以及所述红外光图像进行主特征提取,得到多层次的可见光主特征以及多层次的红外光主特征;

第三模块,用于对所述可见光图像以及所述红外光图像进行辅助特征提取,得到多层次的可见光辅助特征以及多层次的红外光辅助特征;

第四模块,用于对多层次的所述可见光主特征与多层次的所述可见光辅助特征进行级联交互,得到目标可见光特征;

第五模块,用于对多层次的所述红外光主特征与多层次的所述红外光辅助特征进行级联交互,得到目标红外光特征;

第六模块,用于根据所述目标可见光特征以及所述目标红外光特征,生成初始融合图像;

第七模块,用于根据所述可见光图像以及所述红外光图像,构造目标损失函数;

第八模块,用于根据所述目标损失函数,对所述初始融合图像进行调整,得到目标融合图像。

10.一种电子设备,其特征在于,包括处理器以及存储器;

所述存储器用于存储程序;

所述处理器执行所述程序实现如权利要求1至8中任一项所述的方法。