1.一种全景图像质量评价方法,其特征在于,包括以下步骤:
获取全景图像,将所述全景图像转换为对应的视口图像,提取视口图像对应的显著图;
对所述视口图像进行特征提取,获得对应的多层维度特征向量与高维特征;对所述显著图进行特征提取,获得显著内容区域特征;
基于所述高维特征与所述显著内容区域特征获得第二高维特征,所述第二高维特征进行平均池化后获得第二高维特征向量,基于所述第二高维特征获得视口总特征;其中,将所述高维特征与所述显著内容区域特征按元素相乘,获得第二高维特征;将所述第二高维特征进行拼接,获得视口总特征;
所述第二高维特征向量与所述多层维度特征向量拼接获得视口总特征向量;
基于所述视口总特征通过权重生成网络获得权重值与偏置值;
基于所述视口总特征向量与所述权重值与所述偏置值获得感知质量分数;
所述权重值与偏置值的获取过程包括:将所述视口总特征输入五个不同的权重生成网络,分别获得五个权重值与偏置值,五个权重生成网络中均包括二维卷积层、平均池化层与全连接层;第五个权重值及偏置值均为视口总特征依次通过平均池化层与全连接层获得;其中,每个权重生成网络的二维卷积层、全连接层的设计均不相同;
基于权重值与偏置值构建由五个卷积核大小为1×1的卷积层操作构成的五个全连接层,所述视口总特征向量连续经过五个连接层后获得所述感知质量分数,其中,所述权重值与偏置值分别作为全连接层的权重和偏置。
2.根据权利要求1所述的全景图像质量评价方法,其特征在于,
将所述全景图像转换为球体结构下的六个视口图像,以固定角度值为基准,提取多组视口图像。
3.根据权利要求2所述的全景图像质量评价方法,其特征在于,
视口总特征向量的获取过程包括:所述第二高维特征向量的数量与所述视口图像的数量一致,将第二高维特征向量分别与所述多层维度特征向量进行拼接,获得第三高维特征向量,第三高维特征与所述视口图像的数量一致,再将第三高维特征向量进行拼接获得视口总特征向量。
4.根据权利要求1所述的全景图像质量评价方法,其特征在于,
所述多层维度特征向量的获取过程包括:构建多维度特征提取网络,通过主干网络获得多层特征图,将多层特征图输入多维度特征提取网络中,通过二维卷积和平均池化降维后,转化为向量,再通过全连接层处理获得多层维度特征向量;其中,所述多维度特征提取网络包括三种结构,输出三个多层维度特征向量,所述主干网络为Resnet34。
5.根据权利要求1所述的全景图像质量评价方法,其特征在于,所述显著图与所述视口图像在进行特征提取前,还进行图像维度调整。