欢迎来到知嘟嘟! 联系电话:13336804447 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13336804447
知嘟嘟经纪人
收藏
专利号: 2019110326378
申请人: 衢州学院
专利类型:发明专利
专利状态:已下证
专利领域: 计算;推算;计数
更新日期:2024-01-05
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.一种基于决策层融合的视频复杂场景区域分割方法,其特征在于,包括如下步骤:步骤S1,获取视频当前时刻帧中每一个像素点对应的色调特征值,并根据所述色调特征值对所述当前时刻帧进行关于色调的第一场景区域分割处理;

步骤S2,通过并行计算模式,同步地获取所述当前时刻帧中每一个像素点对应的复合纹理特征值,并根据所述复合纹理特征值对所述当前时刻帧进行关于纹理的第二场景区域分割处理;

步骤S3,通过并行计算模式,同步地获取所述当前时刻帧中每一个像素点对应的近期动态特征值,并根据所述近期动态特征值对所述当前时刻帧进行关于动态性的第三场景区域分割处理;

步骤S4,对所述第一场景区域分割处理、所述第二场景区域分割处理和所述第三场景区域分割处理各自的分割结果进行决策层融合处理,以生成关于所述当前时刻帧的综合场景区域分割结果。

2.如权利要求1所述的基于决策层融合的视频复杂场景区域分割方法,其特征在于:在所述步骤S1中,获取视频当前时刻帧中每一个像素点对应的色调特征值具体包括,步骤S101,对所述当前时刻帧进行从RGB颜色空间到HSI颜色空间的转换处理,其中,色调H的取值范围为[0°,360°],饱和度S和强度I的取值范围均为[0,1];

步骤S102,将所述色调H对应的域值划分为如下6个子集:H1=[30°,90°)、H2=[90°,

150°)、H3=[150°,210°)、H4=[210°,270°)、H5=[270°,330°)和H6=[330°,360°]∪[0°,

30°),以将所述当前时刻帧对应的像素点进行关于所述6个子集的分类处理;

步骤S103,根据所述分类处理的结果,将所述当前时刻帧的每一个像素点H(i,j)进行归一化与量化处理,以获得每一个像素点对应的色调特征H(i,j)|t,其中,所述色调特征值H(i,j)|t的计算结果如下式(1)在所述式(1)中,H(i,j)|t表示所述当前时刻帧t在坐标(i,j)处的像素点的色调特征值;

在所述步骤S1中,根据所述色调特征值对所述当前时刻帧进行关于色调的第一场景区域分割处理还具体包括,步骤S104,对所述当前时刻帧t中所有像素点的色调特征值进行聚类分析处理,以确定每一个像素点所属的聚类;

步骤S105,将属于同一聚类的像素点划入同一区域,以实现对所述当前时刻帧的关于色调的第一场景区域分割处理。

3.如权利要求1所述的基于决策层融合的视频复杂场景区域分割方法,其特征在于:在所述步骤S2中,获取所述当前时刻帧中每一个像素点对应的复合纹理特征值具体包括,步骤S201,于HSI颜色空间的I通道,通过原始LBP算子,获取在所述I通道上当前时刻帧t在坐标(i,j)处的像素点的LBP纹理值W1(i,j)|t;

步骤S202,通过圆形LBP算子,获取在所述I通道上当前时刻帧t在坐标(i,j)处的像素点的LBP纹理值W2(i,j)|t;

步骤S203,根据下面式(2),获取当前时刻帧t在坐标(i,j)处的像素点的复合纹理特征值W(i,j)|t步骤S204,对所述复合纹理特征值W(i,j)|t进行归一化处理,以使其的值域为[0,1];

在所述步骤S2中,根据所述复合纹理特征值对所述当前时刻帧进行关于纹理的第二场景区域分割处理还包括,步骤S205,对所述当前时刻帧t中所有像素点的复合纹理特征值进行聚类分析处理,以确定每一个像素点所属的聚类;

步骤S206,将属于同一聚类的像素点划入同一区域,以实现对所述当前时刻帧的关于纹理的第二场景区域分割处理。

4.如权利要求1所述的基于决策层融合的视频复杂场景区域分割方法,其特征在于:在所述步骤S3中,获取所述当前时刻帧中每一个像素点对应的近期动态特征值具体包括,步骤S301,于HSI颜色空间的I通道,构建关于当前时刻帧中每一个像素点的混合高斯背景模型GMM;

步骤S302,在所述I通道上,统计每一个像素点对应的显著性强度值变化的次数,其中,所述显著性强度值变化是指像素点的强度值变化幅度超出其对应的混合高斯背景模型GMM所限定的强度值正常变化范围;

步骤S303,在所述I通道上,根据下面式(3),获取每一个像素点的近期动态特征值在上述式(3)中, 为在I通道上从当前时刻帧k到另一当前时刻帧t之间的时间中处于坐标(i,j)处的像素点对应的显著性强度变化的次数,D(i,j)|t为在I通道上从当前时刻帧k到另一当前时刻帧t之间的时间中处于坐标(i,j)处的像素点对应的显著性强度变化的频率,D(i,j)|t为在I通道上处于坐标(i,j)处的像素点对应的近期动态特征值,并且满足100≤t-k≤20000;

在所述步骤S3中,根据所述近期动态特征值对所述当前时刻帧进行关于动态性的第三场景区域分割处理还具体包括,步骤S304,对当前时刻帧t中所有像素点的近期动态特征值进行聚类分析处理,以确定每一个像素点所属的聚类;

步骤S305,将属于同一聚类的像素点划入同一区域,以实现对所述当前时刻帧的关于动态性的第三场景区域分割处理。

5.如权利要求1所述的基于决策层融合的视频复杂场景区域分割方法,其特征在于:在所述步骤S4中,对所述第一场景区域分割处理的、所述第二场景区域分割处理和所述第三场景区域分割处理各自的分割结果进行决策层融合处理,以生成关于所述当前时刻帧的综合场景区域分割结果具体包括,步骤S401,将所述第一场景区域分割处理、所述第二场景区域分割处理和所述第三场景区域分割处理各自的分割结果进行逻辑“与”运算,以得到所述决策层融合处理的结果;

步骤S402,根据所述决策层融合处理的结果,生成关于所述当前时刻帧中每一个像素点的类别号的三维向量C(i,j)|t,以作为所述综合场景区域分割结果,其中,所述三维向量C(i,j)|t的具体形式如下式(4)C(i,j)|t=(CH(i,j)|t,CW(i,j)|t,CD(i,j)|t)  (4)在上述式(4)中,CH(i,j)|t为所述当前时刻帧的处于坐标(i,j)处的像素点关于所述第一场景区域分割处理结构的类别号,CW(i,j)|t为所述当前时刻帧的处于坐标(i,j)处的像素点关于所述第二场景区域分割处理结构的类别号,CD(i,j)|t为所述当前时刻帧的处于坐标(i,j)处的像素点关于所述第三场景区域分割处理结构的类别号,其中所述当前时刻帧中具有相同类别号的像素点隶属于同一场景区域。

6.一种基于决策层融合的视频复杂场景区域分割装置,其特征在于,所述装置包括:第一特征值获取模块,其用于获取视频当前时刻帧中每一个像素点对应的色调特征值;

第二特征值获取模块,其用于获取所述当前时刻帧中每一个像素点对应的复合纹理特征值;

第三特征值获取模块,其用于获取所述当前时刻帧中每一个像素点对应的近期动态特征值;

第一场景区域分割模块,其用于根据所述色调特征值对所述当前时刻帧进行关于色调的第一场景区域分割处理;

第二场景区域分割模块,其用于根据所述复合纹理特征值对所述当前时刻帧进行关于纹理的第二场景区域分割处理;

第三场景区域分割模块,其用于根据所述近期动态特征值对所述当前时刻帧进行关于动态性的第三场景区域分割处理;

综合场景区域分割结果生成模块,其用于对所述第一场景区域分割处理的、所述第二场景区域分割处理和所述第三场景区域分割处理各自的分割结果进行决策层融合处理,以生成关于所述当前时刻帧的综合场景区域分割结果。

7.如权利要求6所述的基于决策层融合的视频复杂场景区域分割装置,其特征在于:所述第一特征值获取模块包括颜色空间转换子模块,色调子集划分子模块和色调量化子模块;其中,所述颜色空间转换子模块用于对所述当前时刻帧进行从RGB颜色空间到HSI颜色空间的转换处理;

所述色调子集划分子模块用于将所述HSI颜色空间中色调H对应的域值划分为六个子集H1、H2、H3、H4、H5和H6;

所述色调量化子模块用于根据所述六个子集H1、H2、H3、H4、H5和H6各自的域值对所述当前时刻帧的每一个像素点进行归一化与量化处理,以获得每一个像素点H(i,j)对应的色调特征值H(i,j)|t,其中,所述色调特征值H(i,j)|t的计算结果如下式(1)在所述式(1)中,H(i,j)|t表示所述当前时刻帧t在坐标(i,j)处的像素点的色调特征值,并且H1=[30°,90°)、H2=[90°,150°)、H3=[150°,210°)、H4=[210°,270°)、H5=[270°,

330°)和H6=[330°,360°]∪[0°,30°);

所述第一场景区域分割模块包括第一聚类分析子模块和第一像素点划分子模块;其中,所述第一聚类分析子模块用于对所述当前时刻帧t中所有像素点的色调特征值进行聚类分析处理,以确定每一个像素点所属的聚类;

所述第一像素点划分子模块用于将属于同一聚类的像素点划入同一区域,以实现对所述当前时刻帧的关于色调的第一场景区域分割处理。

8.如权利要求6所述的基于决策层融合的视频复杂场景区域分割装置,其特征在于:所述第二特征值获取模块包括第一LBP纹理值计算子模块、第二LBP纹理值计算子模块、复合纹理值计算子模块和复合纹理值归一化子模块;

其中,

所述第一LBP纹理值计算子模块用于通过原始LBP算子,获取在HSI颜色空间的I通道上当前时刻帧t在坐标(i,j)处的像素点的LBP纹理值W1(i,j)|t;

所述第二LBP纹理值计算子模块用于通过圆形LBP算子,获取在所述I通道上当前时刻帧t在坐标(i,j)处的像素点的LBP纹理值W2(i,j)|t;

所述复合纹理值计算子模块用于计算所述LBP纹理值W1(i,j)|t和所述LBP纹理值W2(i,j)|t的平均值,以得到当前时刻帧t在坐标(i,j)处的像素点的复合纹理特征值W(i,j)|t;

所述复合纹理值归一化子模块用于对所述复合纹理特征值W(i,j)|t进行归一化处理,以使其的值域为[0,1];

所述第二场景区域分割模块包括第二聚类分析子模块和第二像素点划分子模块;其中,所述第二聚类分析子模块用于对所述当前时刻帧t中所有像素点的复合纹理特征值进行聚类分析处理,以确定每一个像素点所属的聚类;

所述第二像素点划分子模块用于将属于同一聚类的像素点划入同一区域,以实现对所述当前时刻帧的关于纹理的第二场景区域分割处理。

9.如权利要求6所述的基于决策层融合的视频复杂场景区域分割装置,其特征在于:所述第三特征值获取模块包括背景模型构建子模块、强度值变化统计子模块和近期动态值计算子模块;其中,所述背景模型构建子模块用于在HSI颜色空间的I通道中,构建关于当前时刻帧中每一个像素点的混合高斯背景模型GMM;

所述强度值变化统计子模块用于在所述I通道上,统计每一个像素点对应的显著性强度值变化的次数,其中,所述显著性强度值变化是指像素点的强度值变化幅度超出其对应的混合高斯背景模型GMM所限定的强度值正常变化范围;

所述近期动态值计算子模块用于在所述I通道上,根据下面式(3)计算每一个像素点的近期动态特征值在上述式(3)中, 为在I通道上从当前时刻帧k到另一当前时刻帧t之间的时间中处于坐标(i,j)处的像素点对应的显著性强度变化的次数,D(i,j)|t为在I通道上从当前时刻帧k到另一当前时刻帧t之间的时间中处于坐标(i,j)处的像素点对应的显著性强度变化的频率,D(i,j)|t为在I通道上处于坐标(i,j)处的像素点对应的近期动态特征值,并且满足100≤t-k≤20000;

所述第三场景区域分割模块包括第三聚类分析子模块和第三像素点划分子模块;其中,所述第三聚类分析子模块用于对当前时刻帧t中所有像素点的近期动态特征值进行聚类分析处理,以确定每一个像素点所属的聚类;

所述第三像素点划分子模块用于将属于同一聚类的像素点划入同一区域,以实现对所述当前时刻帧的关于动态性的第三场景区域分割处理。

10.如权利要求6所述的基于决策层融合的视频复杂场景区域分割装置,其特征在于:所述综合场景区域分割结果生成模块包括决策层融合处理子模块和三维向量生成子模块;其中,所述决策层融合处理子模块用于将所述第一场景区域分割处理、所述第二场景区域分割处理和所述第三场景区域分割处理各自的分割结果进行逻辑“与”运算,以得到所述决策层融合处理的结果;

所述三维向量生成子模块用于根据所述决策层融合处理的结果,生成关于所述当前时刻帧中每一个像素点的类别号的三维向量C(i,j)|t,以作为所述综合场景区域分割结果,其中,所述三维向量C(i,j)|t的具体形式如下式(4)C(i,j)|t=(CH(i,j)|t,CW(i,j)|t,CD(i,j)|t)  (4)在上述式(4)中,CH(i,j)|t为所述当前时刻帧的处于坐标(i,j)处的像素点关于所述第一场景区域分割处理结构的类别号,CW(i,j)|t为所述当前时刻帧的处于坐标(i,j)处的像素点关于所述第二场景区域分割处理结构的类别号,CD(i,j)|t为所述当前时刻帧的处于坐标(i,j)处的像素点关于所述第三场景区域分割处理结构的类别号,其中所述当前时刻帧中具有相同类别号的像素点隶属于同一场景区域。