欢迎来到知嘟嘟! 联系电话:13336804447 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13336804447
知嘟嘟经纪人
收藏
专利号: 2019112777822
申请人: 杭州电子科技大学
专利类型:发明专利
专利状态:已下证
专利领域: 计算;推算;计数
更新日期:2024-01-05
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.一种基于改进YOLO v3的古文字及字体识别方法,其特征在于,包括以下步骤:

1)根据每个字的原始数据量能否满足神经网络训练的要求和是否属于常用古汉字,收集来自互联网的古文字图片,包含三种不同字体,分别为甲骨文、金文和楚系简帛;

2)对收集的古文字图片进行扩充处理,获得古文字样本图像;

3)遍历古文字样本图像,对每张图像用包围框对古文字进行字形字体标记处理,获得对应的label文件,它与古文字样本图像共同构成图像数据集;

4)将图像数据集划分为训练验证集和测试集,将训练验证集划分为训练集和验证集,针对图像数据集中的古文字样本图像和label文件进行同比例缩放;

5)网络调整,对YOLO v3网络进行轻量化,调整后的主干网络依次为Conv0,Conv1,Stage2,Stage3,Stage4,Stage5,Stage6;Conv0和Conv1均为3×3的1步长卷积块;每个Stage的开始阶段都是一个Shuffle空间上采样单元;然后接入N个Shuffle基本单元,Stage2~Stage6的N值依次为2、4、6、6、4;Shuffle基本单元构成为:接入的通道均分为两部分后,一部分通过1×1的1步长Conv+3×3的1步长DWConv+1×1的1步长Conv后与另一部分进行拼接,然后进行通道随机混合;Shuffle空间上采样单元构成为:接入通道分别通过3×

3的2步长DWConv+1×1的1步长Conv,1×1的1步长Conv+3×3的2步长DWConv+1×1的1步长Conv,对两者的输出进行拼接后再进行通道随机混合操作;使用通道随机混合操作,将深度不同的两个分支的卷积结果合并在一起,从而实现了高级和低级信息的特征融合,其中DWConv为深度卷积块;

6)模型的训练,每次选取多个训练集样本进行训练,获得训练模型,使用Adam算法基于训练数据迭代更新神经网络的权重;训练过程中在验证集样本中对训练模型进行验证,计算得到训练集以及验证集上的损失,观察网络的训练效果,最终选择损失值最小的模型作为model;

7)在测试集上对步骤6)最终获得的model进行测试,在测试集样本图像上预测并标注出古文字及字体的类别和置信度;

8)从拓印本和石碑上获取属于识别类别范围内的古文字图片,经过图像预处理后,输入model中,获得检测结果。

2.根据权利要求1所述的一种基于改进YOLO v3的古文字及字体识别方法,其特征在于:所述的步骤1)中,;选择的是原始图片,超过30张的古文字图片作为数据集;整个数据集包含三种字体100个字共计4000张原始图片。

3.根据权利要求1所述的一种基于改进YOLO v3的古文字及字体识别方法,其特征在于:对收集的古文字图片进行扩充处理具体为对图片进行缩放、调整亮度与对比度、翻转、旋转、添加噪声、模糊。

4.根据权利要求1所述的一种基于改进YOLO v3的古文字及字体识别方法,其特征在于:所述步骤3)中,对每张图像用包围框对古文字进行字形字体标记处理,具体为:利用标注工具对图片集进行标定,使用一个长方形框作为包围框将古文字框定并标定其真实类别,将长方形框的左上角和右下角的横纵坐标以及标定类别信息记录在.xml类型的label文件中,每张图片对应一个label文件,每张古文字图片最多含有一个包围框。

5.根据权利要求1所述的一种基于改进YOLO v3的古文字及字体识别方法,其特征在于:所述步骤4)中,调整图像尺寸为416×416,对应的label文件也作同比例缩放,然后将数据集按照大约2:1的比例区分训练验证集和测试集,训练验证集再按照大约9:1的比例区分测试集和验证集;

图像缩放使用的方法为双线性插值法,其原理如下:

记图像的映射函数为f,在任意点(i,j),其像素值为y=f(i,j),其中0

得到:

在y轴方向线性插值:

得到:

最后结果:

6.根据权利要求1所述的一种基于改进YOLO v3的古文字及字体识别方法,其特征在于:所述步骤5)中,DWConv的构成为:卷积层+批归一化层,Conv的构成为:卷积层+批归一化层+带泄露修正线性单元层。

7.根据权利要求1所述的一种基于改进YOLO v3的古文字及字体识别方法,其特征在于:所述步骤6)中,每次选取12个训练集样本构成mini-batch进行训练;每个mini-batch是一次迭代训练中随机选择训练数据集的一个小部分,所有mini-batch构成整个训练数据集;每一次迭代训练过程中,每个mini-batch不尽相同,这样的随机性有助于降低模型训练过程中停止在鞍点和局部最小点的可能性,提升模型的训练速度;同时引入了批标准化处理,对每个隐藏层神经元,把逐渐向非线性函数映射后向取值区间极限饱和区靠拢的输入分布强制拉回到均值为0方差为1的比较标准的正态分布,使得非线性变换函数的输入值落在对输入比较敏感的区域,以此避免梯度消失问题。

8.根据权利要求1所述的一种基于改进YOLO v3的古文字及字体识别方法,其特征在于:所述步骤7)中,YOLO v3借鉴了特征金字塔,通过上采样和融合的方法,获得13×13,26×26,52×52三个尺度的特征图并进行预测;输入古文字的图像,使用步骤4)所述的双线性插值方法对图像进行缩放后输入给模型,最终在三个尺度的特征图上分别作预测。

9.根据权利要求1所述的一种基于改进YOLO v3的古文字及字体识别方法,其特征在于:所述步骤8)中,从拓印本和石碑上获取属于识别类别范围内的古文字图片是指使用相机拍摄的拓印本和石碑的照片,然后从中裁剪出属于模型识别范围内的古汉字图片。