欢迎来到知嘟嘟! 联系电话:13336804447 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13336804447
知嘟嘟经纪人
收藏
专利号: 2019112060044
申请人: 杭州电子科技大学
专利类型:发明专利
专利状态:已下证
专利领域: 电通信技术
更新日期:2025-05-09
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.一种基于残差分块的自适应多视点视频错误隐藏方法,其特征在于:该方法首先利用丢失块可用邻块的残差信息对丢失块进行残差重建,然后根据残差值对丢失块进行模式划分,划分结束后基于残差信息对丢失块划分后的子块进行重建顺序排序,最后基于重建顺序结合时空域信息和视点间信息重建丢失块;具体如下:(1) .多方向加权残差重建:首先利用丢失块可用邻块的残差信息对丢失块进行残差重建,重建公式如下:RT为丢失像素点上侧最相邻像素点的残差值,RB为丢失像素点下侧最相邻像素点的残差值,RL为丢失像素点左侧最相邻像素点的残差值,RR为丢失像素点右侧最相邻像素点的残差值,d1、d2、d3和d4分别为RT、RB、RL和RR到丢失点的距离,Rlost为待重建的点,当邻块也是丢失块时,将对应点的残差值视为0;(2) .丢失块自适应块划分:首先利用丢失块的空域残差信息对丢失块进行初步块划分,然后利用时域和视点域的信息对丢失块的初步划分进行修正与细化;具体是:(2‑1) .初步块划分:通过对比丢失块局部块的残差值与丢失块整体块残差值的相对大小,对丢失块进行递归划分,将64×64的丢失块划分为若干不同尺寸的子块;当丢失块局部块的残差值大于整体丢失块时,对该局部块进行划分,否则不进行划分;对于丢失块划分,子块的最大尺寸为64×64,此时划分深度为0;子块的最小尺寸为8×8,此时CU的划分深度为3;设子块CU的尺寸为L×L,其中L=(64>>depth),depth∈{1 ,2,3,4},即CTU划分的最小单元为8×8的CU块,深度depth每增加1层,L缩小1倍;具体递归划分算法流程如下:Step1 .计算当前块Bcur的残差均值resicur,记当前块的尺寸为L×L,划分深度为depthcur;Step2.如果当前块Bcur深度depthcur=3,说明已经划分到最小尺寸,退出递归,否则进入Step3;Step3.将当前块划分为四个子块B0、B1、B2和B3,每个子块的深度为depthi=depthcur+1,尺寸为Li×Li,Li=L>>1;Step4.分别计算子块Bi的残差均值resii,对比resii与resicur:当resii≤resicur,不需要进行递归划分;当resii>resicur,需要划分为更小尺寸的子块,进入Step1进行递归划分;如果B0、B1、B2和B3均不需要递归划分,将B0、B1、B2和B3划分为一个整体,取消对当前块Bcur的划分;Step4.结束划分;(2‑2) .修正与细化:将前、后向参考帧的同位块和邻视点帧同位块水平方向上的5个块加入候选块集中,在7个块中选择最优匹配块,选择标准如下:其中,Blost(u0,v0)为丢失块8邻块中某个邻块(u0,v0)处的像素值,Bcandi(u1,v1)为候选块对应邻块(u1,v1)处的像素值,选取相似度值SimValue最大的块作为最优候选块;当最优候选块的SimValue小于等于设定值Tpixel时,将这个最优候选块选择为最优匹配块,并用最优匹配块的划分模式对丢失块进行修正;否则说明这个丢失块没有最优匹配块,不进行修正;如果最优匹配块存在,则使用它对丢失块进行划分模式修正,修正过程如下:对于丢失块与最优匹配块的同位置区域,如果它们的深度差大于1,则认为此处初步划分出现误差,对其进行修正,将其划分深度加1;否则保持划分深度不变:其中,Bcandi(x,y)为候选块Bcandi中(x,y)位置的像素值,Btop、Bleft、Bright和Bbottom分别为丢失块位置上侧、左侧、右侧和下侧的邻块,wtop、wleft、wright、wbottom分别为对应邻块的边界相似度系数,M为丢失块的尺寸;通过计算运动矢量集中所有运动矢量的Dsim值,选取使Dsim值最小的运动矢量作为最优运动矢量,如果最优运动矢量的Dsim<1.5,则选取该最优运动矢量对丢失子块进行重建,否则使用视点间信息进行重建;(4‑2) .视点间信息重建:如果丢失子块邻块中没有未丢失块或已重建子块,或者通过边界相似度所选取的最优运动矢量集的Dsim≥1.5,则使用视点间信息进行重建:假设v视点下第n帧中出现了丢包,首先在丢失视点的前视点和后视点间做视差搜索,视差搜索公式如下:其中,Bn,v‑1(x,y)为v‑1视点下第n帧中位于(x,y)位置的像素值,Bn,v+1(x,y)为v+1视点下第n帧中位于(x,y)位置的像素值,为视差的水平分量,为视差的垂直分量;

完成视差搜索后,将得到的视差值除以2作为丢失视点与前一视点的视差;通过这个视差找到丢失子块位于v‑1视点的匹配块,对匹配块及匹配块周围的8邻块位置的块均进行视差矢量外推,根据外推块与丢失块的重叠面积从9个候选块中选择一个重叠面积最大的候选块,使用此候选块的信息对丢失块进行运动补偿,完成对丢失块的重建。2.如权利要求1所述的一种基于残差分块的自适应多视点视频错误隐藏方法,其特征在于:所述的设定值Tpixel=3~6。3.如权利要求1所述的一种基于残差分块的自适应多视点视频错误隐藏方法,其特征在于,所述的边界相似度系数wj,j∈(top,left,right,bottom)确定方式为:如为未丢失的块,wj=1;如为重建块,wj=0.6;如为未重建的块,wj=0。