1.一种基于用户视场的全景视频编码优化方法,其特征在于,包括如下步骤:(1)获取预测的FoV模式FoV(μi,μj);
(2)根据FoV模式FoV(μi,μj)生成当前帧中视场FoV(i,j)对应的二维高斯分布概率;具体包括如下步骤:(21)N×M种FoV模式使用其视场中心平铺块对应概率来表征;
(22)计算tile(i,j)的累计观看概率,其中tile(i,j)会处于n×m个相邻的FoV模式中,若将当前FoV向下相隔v个tile,向右相隔h个tile对应的FoV模式记为FoV(i',j'),以下分三种情况讨论FoV(i',j')的视点中心;
(23)第一种情况FoV(i',j')没有超出边界;计算式如下式:i'=i+v;j'=j+h,当0≤i+v
(24)第二种情况FoV(i',j')只跨越了左/右边界;计算式如下式:i'=i+v;j'=(j+h)modN,当(j+h<0或j+h≥N)且0≤i+v
(25)第三种情况FoV(i',j')跨越了上/下边界;计算式如下式:i'=M‑1‑(i+v)modM;j'=j+N/2,当i+v<0或i+v≥M;
(26)通过得到的二维高斯分布概率和tile被观测到的概率和来计算tile(i,j)的被观测的概率;计算式如下式:其中m、n表示FoV中包含tile的个数为m行n列;
(3)获得tile(i,j)处于n×m个FoV模式的累计概率即该tile被观测的概率;将视频帧划分为N×M个平铺块,平铺块表征为tile(i,j),其中i、j分别为平铺块的行、列索引号,i∈{0,1,…,M‑1},j∈{0,1,…,N‑1});
(4)使用等矩形投影ERP格式下投影变换公式计算tile(i,j)的投影权重;计算式为下式:其中,H为每列中的包含的像素数;
(5)根据最终得到的观测概率和投影权重计算λ和QP值并进行修正;QP调整式使用下式确定:其中,QPi,j为修正后的tile(i,j)的QP值,QPbase为全局拉格朗日乘子对应的QP值;
(6)利用最终得到的QP值进行编码,编码后根据获得的tile级别量化参数选择方案,进行编码。
2.如权利要求1所述的基于用户视场的全景视频编码优化方法,其特征在于,步骤(1)中,获取预测的FoV模式FoV(μi,μj)具体包括如下步骤:(11)获取预测的FoV模式FoV(μi,μj);
(12)计算当预测FoV模式为FoV(μi,μj)时,其他视场FoV(i,j)为视点的概率;