欢迎来到知嘟嘟! 联系电话:13336804447 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13336804447
知嘟嘟经纪人
收藏
专利号: 2021114586263
申请人: 南京林业大学
专利类型:发明专利
专利状态:已下证
专利领域: 计算;推算;计数
更新日期:2026-11-16
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.一种基于YOLACT的三维激光雷达道路点云分割方法,其特征在于,该方法包括以下步骤:S1、样本数据点云变换:将三维激光雷达装载在移动车辆上扫描道路获取样本点云数据,包括激光反射强度I,测量点的三维直角坐标(x,y,z);进行点云变换,将三维激光雷达的道路点云数据球面投影为二维图像数据;

S2、构建训练集:按照步骤S1获取若干样本的二维图像数据,标注二维图像数据并分割目标,构建用于训练的图像数据集;

S3、模型训练:基于卷积神经网络模型,对步骤S2获取的图像数据集进行训练,得到三维激光雷达道路点云实例分割模型;

S4、模型预测:对待处理的实测三维激光雷达道路点云数据,采用S1的步骤进行处理获取二维图像数据,对二维图像数据切割后输入三维激光雷达道路点云实例分割模型进行处理,分割出道路目标实例;

步骤S1中通过点云变换获取的二维图像数据包括:二维图像像素坐标(i,j)和该像素坐标处的图像三通道数据(r,g,b),具体采用以下步骤:S1-1、令O为激光束发射位置,P为测量点,根据测量点P的三维直角坐标(x,y,z),计算激光束OP的天顶角和方位角θ;

S1-2、根据下述公式求取测量点P的二维图像像素坐标(i,j);

其中:为天顶角分辨率,为三维激光雷达的最小天顶角,Δθ为方位角分辨率,θmin为三维激光雷达的最小方位角;

S1-3、构建宽为w、高为h的三通道彩色图像,图像像素默认值为0;

其中:为三维激光雷达的最大天顶角,θmax为三维激光雷达的最大方位角;

S1-4、采用下述公式获取测量点P的像素坐标(i,j)处的图像三通道数据(r,g,b):S1-5、采用归一化方法将图像三通道数据取值范围变换到0-255;

所述的模型训练具体包括:

S3-1、将用于训练的图像数据集输入卷积神经网络模型,生成特征图S3-2、将生成的特征图输入特征金字塔FPN进行融合;

S3-3、对特征金字塔FPN融合后的特征图进行语义分割并计算语义分割损失,同时将特征图分别输入到两个并行的分支当中:第一个分支使用基于FCN的原型掩码生成网络protonet产生原型掩码prototypemask;

第二个分支通过预测头网络Prediction Head输出各目标包围框位置的4个坐标,mask系数以及分类置信率,并将Prediction Head网络得到的结果进行快速非极大值抑制FastNMS处理;

S3-4、将FastNMS的处理结果和Protonet输出的原型mask进行组合运算,输出最终道路目标的实例信息,包括实例类别、实例边界框和实例掩膜;S3-5、将步骤S3-4得到的道路目标实例的类别、边界框、掩膜信息与步骤S2所标注的道路目标实例信息进行比对,并加上S3-3的语义分割损失,以多任务损失函数L为优化目标,对模型训练若干次,完成训练,得到基于YOLACT的三维激光雷达道路点云实例分割模型。

2.根据权利要求1所述的基于YOLACT的三维激光雷达道路点云分割方法,其特征在于:步骤S2中,S2-1、对于二维图像数据,将每幅图像切割至统一尺寸;

S2-2、使用labelme标注出每幅图像中需要分割的道路目标实例,得到相应的json文件;

S2-3、将训练图像和json文件转换成coco格式的数据集。

3.根据权利要求2所述的基于YOLACT的三维激光雷达道路点云分割方法,其特征在于:步骤S2-1中,对切割后的图像进行水平翻转,扩充数据集。

4.根据权利要求1所述的基于YOLACT的三维激光雷达道路点云分割方法,其特征在于:组合运算包括叠加,裁切和阈值分割。

5.根据权利要求1所述的基于YOLACT的三维激光雷达道路点云分割方法,其特征在于:多任务损失函数L采用如下公式计算:L=Lcls+Lbox+Lmask+Lsemantic

其中:Lcls表示类别损失函数,Lbox表示边界框损失函数,Lmask表示掩膜损失函数,Lsemantic表示语义分割损失函数。