欢迎来到知嘟嘟! 联系电话:13336804447 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13336804447
知嘟嘟经纪人
收藏
专利号: 2018115517841
申请人: 南京邮电大学
专利类型:发明专利
专利状态:已下证
专利领域: 计算;推算;计数
更新日期:2026-11-16
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.一种适用于视频编码的图像显著性快速检测方法,其特征在于,包括以下步骤:S1:读入以YUV格式存储的待编码的视频帧图像,将亮度分量Y按照预设条件缩放至预设大小并对整体图像做DCT变换;

S2:对DCT变换系数取符号函数得到图像签名描述子,对图像签名描述子做逆DCT变换并进行高斯平滑滤波,得到缩放后图像的全局显著性并将其缩放至原始图像大小得到图像全局显著性;

S3:对原始图像的亮度分量Y以预定图像块为单位进行DCT变换,对原始图像的色度分量UV以相应图像块为单位进行DCT变换,分别提取亮度Y分量和色度UV分量各自的直流系数和选定的交流系数作为亮度与色度的强度特征和纹理特征;

S4:使用局部对比度方法计算亮度与色度分别基于强度特征和纹理特征的局部显著性,对基于强度特征和纹理特征的局部显著性按空间方差自适应融合得到图像局部显著性;

S5:融合图像全局显著性和图像局部显著性,经高斯平滑滤波得到当前编码帧图像的最终显著性。

2.根据权利要求1所述的一种适用于视频编码的图像显著性快速检测方法,其特征在于:所述步骤S1包括如下步骤:S11:读入当前编码帧图像的YUV数据;

S12:根据图像宽度将亮度分量Y按照预设条件缩放至预设大小,具体缩放方法如下:其中,width表示编码帧图像以像素为单位的宽度,Size(Y)表示缩放后的亮度分量大小;

S13:对缩放后的亮度图像整体做DCT变换,计算公式如下:

F(Ys)=DCT(f(Ys))

其中,f(Ys)表示缩放后的亮度分量的像素值,F(Ys)表示对f(Ys)进行DCT变换得到的DCT系数。

3.根据权利要求1所述的一种适用于视频编码的图像显著性快速检测方法,其特征在于:所述步骤S2包括如下步骤:S21:对DCT变换系数取符号函数得到图像签名描述子IS(Ys),公式如下:其中,sign(x)表示符号函数,x表示符号函数的自变量;

S22:对图像签名描述子做逆DCT变换并进行高斯平滑滤波,得到缩放后图像的全局显著性SGs,计算公式如下:SGs=g*[IDCT(IS(Ys)).^2]

其中,.^运算表示对二维矩阵各元素做平方运算,g表示二维高斯滤波的模糊核;

S23:将缩放后图像的全局显著性SGs缩放至原始图像大小,得到图像全局显著性SG。

4.根据权利要求3所述的一种适用于视频编码的图像显著性快速检测方法,其特征在于:所述二维高斯滤波的模糊核的标准差等于所操作图像宽度的0.05倍。

5.根据权利要求1所述的一种适用于视频编码的图像显著性快速检测方法,其特征在于:所述步骤S3包括如下步骤:S31:以亮度分量Y不重叠的4×4块和两个色度分量UV的相应图像块为单位进行二维DCT变换;

S32:分别提取亮度分量Y以4×4块为单位DCT变换后的直流系数和选定的低频交流系数作为亮度的强度和纹理特征;

S33:分别提取两个色度分量UV的相应图像块DCT变换后的直流系数、以及选定的低频交流系数作为两个色度的强度和纹理特征。

6.根据权利要求5所述的一种适用于视频编码的图像显著性快速检测方法,其特征在于:所述选定的低频交流系数采用亮度分量Y不重叠的4×4块DCT变换后的前两个低频交流系数{YAC01,YAC10},以及两个色度分量UV的相应图像块DCT变换后的前两个低频交流系数{UAC01,UAC10}与{VAC01,VAC10}。

7.根据权利要求6所述的一种适用于视频编码的图像显著性快速检测方法,其特征在于:所述步骤S4包括如下步骤:S41:根据提取的亮度分量Y以4×4块为单位的强度和纹理特征,使用局部对比度方法计算亮度基于强度特征和纹理特征的局部显著性,计算公式如下:其中,k表示当前第k个4×4块,Nk表示第k个4×4块局部邻域4×4块的个数,其典型值设置为8,YDC00(k)与YDC00(i)分别表示第k个4×4块与其局部邻域内第i个4×4块DCT变换的直流系数即强度特征,{YAC01(k),YAC10(k)}与{YAC01(i),YAC10(i)}分别表示第k个4×4块与其局部邻域内第i个4×4块DCT变换的前两个交流系数即纹理特征,SLY,DC(k)与SLY,AC(k)分别表示计算得到的亮度分量第k个4×4块基于强度和纹理的局部显著性,对所有块的局部显著性归一化后得到亮度分量基于强度和纹理的局部显著性SLY,DC与SLY,AC;

S42:根据提取的两个色度分量UV相应块的强度特征和纹理特征,使用局部对比度方法计算两个色度分别基于强度特征和纹理特征的局部显著性,计算公式如下:其中,UDC00(k)与VDC00(k)分别表示色度分量U与V第k个块的直流系数即强度特征,{UAC01(k),UAC10(k)}与{VAC01(k),VAC10(k)}分别表示色度分量U与V第k个块的前两个交流系数即纹理特征,{SLU,DC(k),SLU,AC(k)}与{SLV,DC(k),SLV,AC(k)}分别表示色度分量U与V第k个块基于强度和纹理的局部显著性,之后对所有块的局部显著性归一化后得到两个色度分量分别基于强度和纹理的局部显著性{SLU,DC,SLU,AC}与{SLV,DC,SLV,AC};

S43:计算各个局部显著性图的空间方差,计算公式如下:

其中,SLm表示之前计算得到的YUV分量分别基于强度和纹理的局部显著性,m={1,2,3,

4,5,6},Wb和Hb分别表示显著性以块为单位的宽度和高度,SLm,a(i)和SLm,a(j)分别表示显著性在宽度与高度上的方差,var(SLm)表示计算出的局部显著性的空间方差;

S44:计算基于空间方差的局部显著性的自适应融合权重γm,计算公式如下:S45:基于自适应融合权重γm计算图像局部显著性,计算公式如下:其中,SLb表示计算得到的当前帧以4×4块为单位的局部显著性,将其缩放至原始图像大小,得到图像局部显著性SL。

8.根据权利要求1所述的一种适用于视频编码的图像显著性快速检测方法,其特征在于:所述步骤S5包括如下步骤:S51:以指数关系融合图像全局显著性SG和局部显著性SL得到图像显著性SGL,计算公式如下:SGL=M(SL.×eSG)

其中,.×运算表示矩阵按元素对应相乘,M(x)为幅值缩放函数;

S52:最后对图像显著性SGL再做一次高斯平滑滤波,并归一化后得到当前帧图像的最终显著性。

9.一种适用于视频编码的图像显著性快速检测装置,其特征在于,包括:图像全局显著性提取模块、强度特征和纹理特征提取模块、强度特征和纹理特征融合模块和最终显著性融合模块;

所述图像全局显著性提取模块:用于读入YUV格式的视频帧图像,将亮度分量Y按照预设条件缩放至预设大小并对整体图像做DCT变换;

对DCT变换系数取符号函数得到图像签名描述子,对图像签名描述子做逆DCT变换并进行高斯平滑滤波,得到图像全局显著性并缩放至原始图像大小;

所述强度特征和纹理特征提取模块:用于对原始图像的亮度分量Y的预定图像块为单位进行DCT变换;对原始图像的色度分量UV以相应图像块为单位进行DCT变换,分别提取亮度Y分量和色度UV分量各自的直流系数和选定的交流系数作为亮度与色度的强度特征和纹理特征;

所述强度特征和纹理特征融合模块:用于使用局部对比度方法计算亮度与色度分别基于强度特征和纹理特征的局部显著性,对基于强度特征和纹理特征的局部显著性按空间方差自适应融合得到图像局部显著性;

所述最终显著性融合模块:用于以指数关系融合图像全局显著性和图像局部显著性,经高斯平滑滤波得到当前编码帧图像的最终显著性。

10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现以下步骤:S1:读入以YUV格式存储的待编码的视频帧图像,将亮度分量Y按照预设条件缩放至预设大小并对整体图像做DCT变换;

S2:对DCT变换系数取符号函数得到图像签名描述子,对图像签名描述子做逆DCT变换并进行高斯平滑滤波,得到缩放后图像的全局显著性并将其缩放至原始图像大小得到图像全局显著性SG;

S3:对原始图像的亮度分量Y以预定图像块为单位进行DCT变换,对原始图像的色度分量UV以相应图像块为单位进行DCT变换,分别提取亮度Y分量和色度UV分量各自的直流系数和选定的交流系数作为亮度与色度的强度特征和纹理特征;

S4:使用局部对比度方法计算亮度与色度分别基于强度特征和纹理特征的局部显著性,对基于强度特征和纹理特征的局部显著性按空间方差自适应融合得到图像局部显著性;

S5:融合图像全局显著性和图像局部显著性,经高斯平滑滤波得到当前编码帧图像的最终显著性。