欢迎来到知嘟嘟! 联系电话:13336804447 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13336804447
知嘟嘟经纪人
收藏
专利号: 2020110132271
申请人: 湖北科技学院
专利类型:发明专利
专利状态:已下证
专利领域: 计算;推算;计数
更新日期:2026-11-16
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.公共场所异常行为自动识别方法,其特征在于,包括:

S1:对采集的图像进行多目标动态检测,检测算法使用YOLO系列算法,识别出有人类目标;

S2:采用快速角点检测和LK光流法对识别出的人类目标进行跟踪速度估计,并识别出移动速度超过速度阈值的目标,将其作为异常目标;

S3:判断预设像素区域内人类目标密度是否大于密度阈值,如果大于,则判定为异常行为;

S4:对已识别出的人类目标进行人体关键点置信度和亲和度向量计算,然后进行关键点聚类解析,区分连接关键完成人体骨骼搭建组装,实现人体姿态估计,并根据人体姿态估计结果,判断姿态是否为异常。

2.如权利要求1所述的方法,其特征在于,YOLO系列算法识别出的人类目标包括各帧图像移动目标系统状态,包括:S2.1:对获得的上一帧图像移动目标系统状态目标区域进行快速分块角点采样,其中选取20个目标特征像素点,当采样点数量小于采样点数量阈值,则目标跟踪失败;

S2.2:将步骤S2.1中汇总的分块角点作为输入,采用LK光流法计算,选取LK光流法的金字塔层数为5,搜索窗口的尺寸为4*4,设置LK光流法每次计算最高迭代20次,当LK光流法迭代次数超过20次仍没有达到设置的精度要求则终止迭代;前向LK光流法跟踪将得到当前帧对应上一帧中采样点的像素点,然后将当前帧中的像素点作为输入传输至LK光流法反向计算,获得当前帧中目标像素点在上一帧的对应跟踪点位置;

S2.3:计算上一帧中目标图像片区域采样点和经过正向反向LK光流法计算得到的上一帧中跟踪到的点对应的欧式距离,即为所求的前向后向误差,剔除误差值超过20个像素距离的点,对剩余的点对的邻域区间做对应的模板匹配操作,得到相对应的一组相似度值,剔除相似度值小于相似度阈值的点对,得到有效的跟踪采样点;

S2.4:根据有效的跟踪点预测当前帧中目标的位置及尺寸,如果本次跟踪成功,则跟踪到的像素点的数量大于1,计算目标在当前帧中的系统状态;如果跟踪到的像素点的数量小于1,则本次跟踪不成功,判定本次跟踪失败;

S2.5:计算上一帧与当前帧跟踪成功后的系统状态中目标位置像素距离差值,根据像素空间距离对应关系,计算出目标的现实空间移动速度,如果目标的现实空间移动速度超出速度阈值,则判定为目标速度异常,记录并储存下相关信息。

3.如权利要求1所述的方法,其特征在于,步骤S3具体包括:

S3.1:根据摄像机自身参数及当前光学放大倍数,计算预设像素区域内人类目标密度;

S3.2:判断预设像素区域内人类目标密度是否大于密度阈值,如果大于,则判定为异常行为。

4.如权利要求3所述的方法,其特征在于,S3.1具体包括:

S3.1.1:获取摄像机的自身参数和光学放大倍数,包括镜头尺寸4mm,则10m外4mm镜头对应的视场范围为12*9m,光学放大倍数为500w像素,其分辨率为2560*1920;

S3.1.2:根据摄像机的自身参数和光学放大倍数,计算一个像素点的间隔指代的位移大小,对于4mm镜头的x方向,10m距离,1个像素点的间隔指代的位移大小为:S3.1.3:根据一个像素点的间隔指代的位移大小,计算预设像素区域内人类目标密度。

5.如权利要求1所述的方法,其特征在于,S4中根据人体姿态估计结果,判断姿态是否为异常,包括:将识别出的人体姿态估计中的人体关键部件进行Hough直线变换,具体为通过局部峰值点绘制直线,其中,峰值点的角度则代表肢体的方向,直线的交叉点为关节位置,直线间的角度为人体躯干;

通过进行人体部件与水平直线间的逆时针旋转角度计算,计算出人体关节的角度,将计算出的关节角度与预设数据集角度比对,如果超出相似度阈值,则判断姿态异常。

6.公共场所异常行为自动识别装置,其特征在于,包括:

人类目标检测单元,用于对采集的图像进行多目标动态检测,检测算法使用YOLO系列算法,识别出有人类目标;

速度异常目标识别单元,用于采用快速角点检测和LK光流法对识别出的人类目标进行跟踪速度估计,并识别出移动速度超过速度阈值的目标,将其作为异常目标;

密集目标识别单元,用于判断预设像素区域内人类目标密度是否大于密度阈值,如果大于,则判定为异常行为;

异常姿态目标识别单元,用于对已识别出的人类目标进行人体关键点置信度和亲和度向量计算,然后进行关键点聚类解析,区分连接关键完成人体骨骼搭建组装,实现人体姿态估计,并根据人体姿态估计结果,判断姿态是否为异常。

7.一种摄像机设备,其特征在于,包括如权利要求6所述的公共场所异常行为自动识别装置、高精度云台模块、远距离光学成像模块以及坐标变换模块,高精度云台模块,用于通过搭载不同规格的镜头实现多种场景的应用需求,包括水平高精度姿态系统与垂直高精度姿态系统;

远距离光学成像模块,为白光光学感应CCD模块,具有100倍光学变焦功能,用于采集

1500米视场内视频数据;

坐标变换模块,用于根据公共场所异常行为自动识别装置识别的异常目标像素坐标和姿态数据,计算站心坐标系下的坐标,并通过投影变换实现大地坐标系和地心坐标系之间坐标转换、地心坐标系和站心坐标系间的坐标转换。

8.如权利要求7所述的摄像机设备,其特征在于,该设备还包括主控模块,用于接收通过通信模块发送的云端服务器远程指令,并对云端服务器远程指令进行解析。

9.如权利要求7所述的摄像机设备,其特征在于,坐标变换模块具体用于:根据远距离光学成像模块视场水平像素分辨率Rh、垂直像素分辨率Rv、摄像头水平视场角Fh及垂直视场角Fv,计算异常目标基于当前姿态系统(α1,β1)数据的偏移量为并根据此偏移量计算出异常行为目标当前真实姿态数据根据当前真实姿态数据中的俯仰数据和高度数据,计算摄像机与异常行为目标距离值d为:其中,h表示高度数据, 表示当前真实姿态数据中的俯仰数据;

根据三维空间坐标转换分析,异常目标基于摄像机轴心为站心的空间直角坐标系坐标,通过根据真实姿态数据旋转和平移距离d计算,计算方式如下:Δx=-sin(L)*ΔE-sin(B)*cos(L)*ΔN+cos(B)*cos(L)*ΔUΔy=cos(L)*ΔE-sin(B)*sin(L)*ΔN+cos(B)*sin(L)*ΔUΔz=cos(B)*ΔN+sin(B)*ΔU

其中,异常目标地心空间直角坐标系坐标为(x1+Δx,y1+Δy,z1+Δz),同样,进行坐标转换得到的异常目标大地坐标系坐标为:其中e'为该大地坐标系对应参考椭球的第二偏心率,(x1,y1,z1)表示摄像机视觉轴心点的地心空间直角坐标,N,E,U表示天东北坐标系,即为站心空间直角坐标系三个轴,E代表x轴,N代表y轴,U代表z轴,三者的分量ΔN、ΔEΔU分别代表异常目标相对于站心的偏移量。

10.如权利要求8所述的摄像机设备,其特征在于,当公共场所异常行为自动识别装置识别到异常目标后,通过通信模块将异常行为种类、时间、图像、像素坐标、空间坐标信息打包发送至云端服务器;

并通过云端服务器对异常行为进行时空位置及图像特征过滤分析,判断异常行为是否是同一目标,具体判断方法如下:采用空间直角坐标系中两点间欧氏距离公式来做判断,如果异常目标空间距离在1米以内,则认为是同一目标,否则向下继续执行;

对回传图像进行特征提取,比对分析异常目标的颜色、行为、姿态、速度、与其周边背景的空间位置关系,若分析结果特征相符,则判定为同一目标。

我要求购
我不想找了,帮我找吧
您有专利需要变现?
我要出售
智能匹配需求,快速出售