欢迎来到知嘟嘟! 联系电话:13336804447 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13336804447
知嘟嘟经纪人
收藏
专利号: 2022101319201
申请人: 安徽大学
专利类型:发明专利
专利状态:已下证
专利领域: 计算;推算;计数
更新日期:2026-11-16
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.一种多模态图像配准方法,其特征在于:包括如下步骤:

S100、通过图像获取装置获取大豆样本的初始图像,初始图像包括RGB图像和高光谱图像;

S200、对RGB图像和高光谱图像分别进行去噪得到去噪后的RGB校正图像和高光谱校正图像;

S300、从高光谱校正图像中抽取三波段组成第一伪RGB图像;

S400、将第一伪RGB图像和RGB校正图像进行预配准得到平移矩阵和变换矩阵;

S500、利用平移矩阵和变换矩阵完成高光谱校正图像的配准;

所述的步骤S400中,包括如下步骤:

S410、将RGB校正图像和第一伪RGB图像角点的左上角对齐,然后对第一伪RGB图像进行反相操作;

S420、手动对第一伪RGB图像进行左、右两次局部透视变换,将两个图像中的籽粒轮廓对准,根据第一伪RGB图像的原始坐标(x0、y0)、配准前坐标(x、y)、配准后坐标(X,Y)以及如下公式计算平移矩阵A和变换矩阵B:其中,

所述的步骤S500中,包括如下步骤:

S510、利用最近邻插值法将高光谱校正图像上采样至第一伪RGB图像尺寸,得到高光谱校正图像原始坐标(x0',y0');

S520、利用平移矩阵A对高光谱校正图像进行平移得到高光谱校正图像的配准前坐标(x'、y'):S530、利用变换矩阵B对高光谱校正图像进行配准得到配准后的高光谱图像:

2.如权利要求1所述的多模态图像配准方法,其特征在于:所述的步骤S500后,包括如下步骤:S600、计算配准后的高光谱校正图像和RGB校正图像之间的配准精度,若配准精度小于设定阈值,则返回步骤S400重新进行预配准;否则,配准完成。

3.如权利要求1所述的多模态图像配准方法,其特征在于:所述的步骤S200中,通过如下步骤对RGB图像进行去噪:S211、对RGB图像进行边缘检测得到第一边缘图像,具体包括:设置双阈值maxval和minval,如果像素值大于maxval则判断为强边缘,如果像素值小于minval则抛弃,如果像素值在两者之间则判断虚边缘;对于虚边缘,若该点与强边缘不相连,则抛弃,若该点与强边缘相连,则保留;

S212、对第一边缘图像进行凸包处理得到二值化的第一掩膜图像,该图像中籽粒部分数值为1、背景部分数值为0;

S213、将第一掩膜图像与RGB图像相乘后得到RGB校正图像。

4.如权利要求1所述的多模态图像配准方法,其特征在于:所述的步骤S200中,对健康、破损的大豆样本,通过如下步骤对高光谱图像进行去噪:S221、从高光谱图像中抽取三波段组成第二伪RGB图像,并对第二伪RGB图像进行灰度化处理得到灰度图;

S222、利用sobel算子对灰度图进行边缘检测得到第二边缘图像;

S223、对第二边缘图像依次进行大律法ostu全局阈值划分和凸包处理得到二值化的第二掩膜图像;

S224、将第二掩膜图像与高光谱图像相乘后得到高光谱校正图像。

5.如权利要求1所述的多模态图像配准方法,其特征在于:所述的步骤S200中,对霉变大豆样本,通过如下步骤对高光谱图像进行去噪:S231、从高光谱图像中抽取三波段组成第二伪RGB图像,并将第二伪RGB图像从RGB颜色空间转换到HSV颜色空间;

S232、对S通道依次进行大律法ostu全局阈值划分和凸包处理得到二值化的第三掩膜图像;

S233、将第三掩膜图像与高光谱图像相乘后得到高光谱校正图像。

6.如权利要求2所述的多模态图像配准方法,其特征在于:所述的步骤S600中,配准精度指标包括互信息MI和结构相似指数SSIM,互信息MI的按如下公式计算:MI(R,F)=H(R)+H(F)-H(R,F),其中R为高光谱图像,F为RGB图像,H为联合熵;结构相似指数从亮度、对比度以及结构相似程度三方面度量图像相似性,其中,亮度用均值估计、对比度用方差估计、结构相似程度用协方差估计。

7.如权利要求2所述的多模态图像配准方法,其特征在于:所述的步骤S600中,按如下公式计算配准可视化结果:式中,x、y为像素坐标,α为配准后的高光谱图像,β为RGB校正图像,R为高光谱波段数,r为RGB波段数,n、m为图像尺寸宽和高,t等于1或2。

8.如权利要求1所述的多模态图像配准方法,其特征在于:所述的步骤S100中,图像获取装置包括暗箱,暗箱顶部安装有高光谱成像仪(1)、工业相机(2)以及计算机(3),高光谱成像仪(1)和工业相机(2)分别获取大豆样本的高光谱图像和RGB图像;暗箱内底板上设置有升降台(4)和置物台(5),置物台(5)用于托撑大豆样本,升降台(4)用于调节置物台(5)的高度;暗箱内设置有卤素灯(6)、调节块(7)以及支架(8),卤素灯(6)固定在调节块(7)上用于为大豆样本提供照明,调节块(7)和支架(8)共同作用用于调节卤素灯(6)的位置和角度;暗箱底部设置有轮胎(9),暗箱内部设置有蓄电池(10)用于为其他部件供电。