欢迎来到知嘟嘟! 联系电话:13336804447 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13336804447
知嘟嘟经纪人
收藏
专利号: 2020110894701
申请人: 禾多科技(北京)有限公司
专利类型:发明专利
专利状态:已下证
专利领域: 计算;推算;计数
更新日期:2026-11-17
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.一种用于识别交通灯状态和计时器状态的方法,包括:获取车载相机拍摄的图像;

对所述图像进行候选目标识别以生成交通灯图像和计时器图像;

基于所述交通灯图像和所述计时器图像,生成交通灯信息和计时器信息,其中,所述交通灯信息包括:四元组,所述计时器信息包括:四元组,第一数值信息,第二数值信息,所述第一数值信息包括:十一元组,所述第二数值信息包括:十一元组;

基于所述交通灯信息和所述计时器信息,生成红绿灯状态信息;

将所述红绿灯状态信息发送至车辆的显示终端,其中,所述基于所述交通灯图像和所述计时器图像,生成交通灯信息和计时器信息,包括:将所述交通灯图像输入至预先训练的交通灯识别模型以生成交通灯信息;

将所述计时器图像输入至预先训练的计时器识别模型以生成候选计时器信息;

获取第一预设标签值集合、第二预设标签值集合和第三预设标签值集合;

将所述候选计时器信息输入至以下公式以生成总体损失值:其中,L1表示第一损失值,L2表示第二损失值,L3表示第三损失值,Loss表示所述总体损失值,i表示序号,j表示序号,k表示序号,n表示所述计时器信息包括的第一数值信息或第二数值信息包括的键值对的数量,m表示所述计时器信息包括的四元组包括的键值对的数量,t表示所述第一预设标签值集合中的第一预设标签值,ti表示所述第一预设标签值集合中的第i个第一预设标签值,S表示所述第一数值信息包括的十一元组中的键值对中的值,Si表示所述第一数值信息包括的十一元组中的第i个键值对中的值,r表示所述第二预设标签值集合中的第二预设标签值,rk表示所述第二预设标签值集合中的第k个第二预设标签值,e表示所述第二数值信息包括的十一元组中的键值对中的值,ek表示所述第二数值信息包括的十一元组中的第k个键值对中的值,u表示所述第三预设标签值集合中的第三预设标签值,uj表示所述第三预设标签值集合中的第j个第三预设标签值,b表示所述计时器信息包括的四元组中的键值对中的值,bj表示所述计时器信息包括的四元组中的第j个键值对中的值,λ1表示第一预设权重,λ2表示第二个预设权重;

响应于确定所述总体损失值在预定损失值范围内,将所述候选计时器信息确定为计时器信息。

2.根据权利要求1所述的方法,其中,所述对所述图像进行候选目标识别以生成交通灯图像和计时器图像,包括:

识别出所述图像中的交通灯以及生成第一检测框,其中,所述第一检测框用于框定所述交通灯;

识别出所述图像中的计时器以及生成第二检测框,其中,所述第二检测框用于框定所述计时器;

基于所述第一检测框和第二检测框,对所述图像进行截取,得到交通灯图像和计时器图像。

3.根据权利要求2所述的方法,其中,所述基于所述交通灯信息和所述计时器信息,生成红绿灯状态信息,包括:

将所述交通灯信息包括的四元组中键值对中的最大值对应的键对应的预设颜色信息确定为交通灯颜色信息;

将所述计时器信息包括的四元组中键值对中的最大值对应的键对应的预设颜色信息确定为计时器颜色信息;

将所述计时器信息包括的第一数值信息包括的十一元组中键值对中的最大值对应的键确定为第一候选值;

将所述计时器信息包括的第二数值信息包括的十一元组中键值对中的最大值对应的键确定为第二候选值;

基于所述第一候选值和所述第二候选值,通过以下公式,生成计时器数值:CN=C1×10+C2,

其中,CN表示所述计时器数值,C1表示所述第一候选值,C2表示所述第二候选值。

4.根据权利要求3所述的方法,其中,所述方法还包括:响应于确定所述交通灯颜色信息与所述计时器颜色信息一致,将所述交通灯颜色信息和所述计时器数值进行组合,得到红绿灯状态信息。

5.一种用于识别交通灯状态和计时器状态的装置,包括:获取单元,被配置成获取车载相机拍摄的图像;

识别单元,被配置成对所述图像进行候选目标识别以生成交通灯图像和计时器图像;

第一生成单元,被配置成基于所述交通灯图像和所述计时器图像,生成交通灯信息和计时器信息,其中,所述交通灯信息包括:四元组,所述计时器信息包括:四元组,第一数值信息,第二数值信息,所述第一数值信息包括:十一元组,所述第二数值信息包括:十一元组;

第二生成单元,被配置成基于所述交通灯信息和所述计时器信息,生成红绿灯状态信息;

发送单元,被配置成将所述红绿灯状态信息发送至车辆的显示终端,其中,所述基于所述交通灯图像和所述计时器图像,生成交通灯信息和计时器信息,包括:将所述交通灯图像输入至预先训练的交通灯识别模型以生成交通灯信息;

将所述计时器图像输入至预先训练的计时器识别模型以生成候选计时器信息;

获取第一预设标签值集合、第二预设标签值集合和第三预设标签值集合;

将所述候选计时器信息输入至以下公式以生成总体损失值:其中,L1表示第一损失值,L2表示第二损失值,L3表示第三损失值,Loss表示所述总体损失值,i表示序号,j表示序号,k表示序号,n表示所述计时器信息包括的第一数值信息或第二数值信息包括的键值对的数量,m表示所述计时器信息包括的四元组包括的键值对的数量,t表示所述第一预设标签值集合中的第一预设标签值,ti表示所述第一预设标签值集合中的第i个第一预设标签值,S表示所述第一数值信息包括的十一元组中的键值对中的值,Si表示所述第一数值信息包括的十一元组中的第i个键值对中的值,r表示所述第二预设标签值集合中的第二预设标签值,rk表示所述第二预设标签值集合中的第k个第二预设标签值,e表示所述第二数值信息包括的十一元组中的键值对中的值,ek表示所述第二数值信息包括的十一元组中的第k个键值对中的值,u表示所述第三预设标签值集合中的第三预设标签值,uj表示所述第三预设标签值集合中的第j个第三预设标签值,b表示所述计时器信息包括的四元组中的键值对中的值,bj表示所述计时器信息包括的四元组中的第j个键值对中的值,λ1表示第一预设权重,λ2表示第二个预设权重;

响应于确定所述总体损失值在预定损失值范围内,将所述候选计时器信息确定为计时器信息。

6.一种电子设备,包括:

一个或多个处理器;

存储装置,其上存储有一个或多个程序;

当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1‑4中任一所述的方法。

7.一种计算机可读介质,其上存储有计算机程序,其中,所述程序被处理器执行时实现如权利要求1‑4中任一所述的方法。