1.一种图像风格迁移方法,其特征在于,包括以下步骤:
S1、将内容图像和风格图像分别输入两个编码器,并分别得到内容特征和风格特征;
S2、将得到的内容特征和风格特征分别输入两个SPNet金字塔网络进行语义增强,并分别得到增强后的内容特征和风格特征;
S3、将增强前的内容特征和风格特征输入第一特征融合模块进行特征融合,将增强后的内容特征和风格特征输入第二特征融合模块进行特征融合;
S4、将第一特征融合模块特征融合后的结果和第二特征融合模块特征融合后的结果相加后,输入第一卷积层进行特征提取,得到风格化特征;
S5、将得到的风格化特征输入解码器,解码得到风格迁移后的图像;
所述两个编码器分别将得到的内容特征和风格特征分为5层的金字塔特征图,5层的金字塔特征图包括从上至下的5层分辨率大小依次减半,通道数量依次加倍的特征图;
所述SPNet金字塔网络包括亚像素卷积层和第二卷积层,通过所述亚像素卷积层将5层的金字塔特征图中每个下层的特征图放大一倍后与上一层的特征图相加,得到4层的金字塔特征图;通过所述第二卷积层将所述4层的金字塔特征图中最上层特征图进行下采样后与下一层的特征图相加,并继续下采样后与下一层的特征图相加,直至得到一个与所述4层的金字塔特征图中最下层特征图分辨率大小一致的增强特征图。
2.如权利要求1所述的图像风格迁移方法,其特征在于,所述第一卷积层为3×3卷积层,所述第二卷积层为1×1卷积层。
3.如权利要求1所述的图像风格迁移方法,其特征在于,所述编码器为VGG编码器,所述解码器为VGG解码器。
4.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现权利要求1‑3中任意一项所述方法的步骤。
5.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1‑3任意一项所述方法的步骤。
6.一种图像风格迁移系统,其特征在于,包括:
两个编码器,用于分别接收内容图像和风格图像,并分别得到内容特征和风格特征;
两个SPNet金字塔网络,用于分别对得到的内容特征和风格特征进行语义增强,并分别得到增强后的内容特征和风格特征;
第一特征融合模块,用于将增强前的内容特征和风格特征进行特征融合;
第二特征融合模块,用于将增强后的内容特征和风格特征进行特征融合;
加法模块,用于将第一SAFF模块特征融合后的结果和第二SAFF模块特征融合后的结果相加;
第一卷积层,用于在相加后进行特征提取,得到风格化特征;
解码器,用于接收风格化特征并解码得到风格迁移后的图像。
7.如权利要求6所述的图像风格迁移系统,其特征在于,所述两个编码器分别将得到的内容特征和风格特征分为5层的金字塔特征图,5层的金字塔特征图包括从上至下的5层分辨率大小依次减半,通道数量依次加倍的特征图。
8.如权利要求7所述的图像风格迁移系统,其特征在于,所述SPNet金字塔网络包括:亚像素卷积层,用于将5层的金字塔特征图中每个下层的特征图放大一倍后与上一层的特征图相加,得到4层的金字塔特征图;
第二卷积层,用于将所述4层的金字塔特征图中最上层特征图进行下采样后与下一层的特征图相加,并继续下采样后与下一层的特征图相加,直至得到一个与所述4层的金字塔特征图中最下层特征图分辨率大小一致的增强特征图。