欢迎来到知嘟嘟! 联系电话:13336804447 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13336804447
知嘟嘟经纪人
收藏
专利号: 2022102998040
申请人: 湖南工业大学
专利类型:发明专利
专利状态:已下证
专利领域: 计算;推算;计数
更新日期:2026-04-06
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.一种基于ACNN和Bi‑LSTM的微表情识别方法,其特征在于,所述方法包括:获取待检测人员的连续时间的多帧表情图像;

将所述多帧表情图像输入微表情识别模型,得到所述待检测人员的表情所属类别;其中,所述微表情识别模型包括初始特征向量提取网络、与初始特征向量提取网络连接的局部识别块注意力卷积神经网络、与初始特征向量提取网络连接的全局注意力卷积神经网络和与局部识别块注意力卷积神经网络、全局注意力卷积神经网络连接的双向长短期记忆网络。

2.根据权利要求1所述的方法,其特征在于,所述将所述多帧表情图像输入微表情识别模型,得到所述待检测人员的表情所属类别,包括:将所述多帧表情图像输入初始特征向量提取网络经过迁移学习处理后,得到第一预设尺度的初始特征向量;

将初始特征向量输入局部识别块注意力卷积神经网络,提取多个识别块,并计算每个识别块的带权特征向量;

将初始特征向量输入全局注意力卷积神经网络,得到带权的全局特征向量;

将所有识别块的带权特征向量和带权的全局特征向量分别输入双向长短期记忆网络,并通过三层全连接层处理,得到所述待检测人员的表情所属类别。

3.根据权利要求2所述的方法,其特征在于,所述将所述多帧表情图像输入初始特征向量提取网络经过迁移学习处理后,得到第一预设尺度的初始特征向量,包括:将所述多帧表情图像输入VGG16网络经过迁移学习处理后,得到尺度为512×28×28的特征向量。

4.根据权利要求2所述的方法,其特征在于,所述将初始特征向量输入局部识别块注意力卷积神经网络,提取多个识别块,并计算每个识别块的带权特征向量,包括:根据初始特征向量提取面部关键点;

根据面部关键点提取眉、眼、鼻、口区域的微表情识别点;

以微表情识别点为中心,从初始特征向量提取第二预设尺度的识别块;

将所述识别块分别经过一个全连接层和一个输出为权重标量的普通注意力网络处理,得到每个识别块的带权特征向量。

5.根据权利要求2所述的方法,其特征在于,所述将初始特征向量输入全局注意力卷积神经网络,得到带权的全局特征向量,包括:将初始特征向量通过VGG16网络的conv4_2层到conv5_2层处理,得到输出尺度为512×

14×14的特征向量;

将尺度为512×14×14的特征向量分别经过一个全连接层和一个输出为权重标量的普通注意力网络处理,得到带权的全局特征向量。

6.根据权利要求1所述的方法,其特征在于,还包括:

获取多个采集者连续时间的多帧表情图像,并设置每个采集者的微表情标签,构建模型训练数据集;

将所述模型训练数据集输入初始微表情识别模型,对初始微表情识别模型进行训练,得到训练后的微表情识别模型;

其中,所述训练后的微表情识别模型包括初始特征向量提取网络、与初始特征向量提取网络连接的局部识别块注意力卷积神经网络、与初始特征向量提取网络连接的全局注意力卷积神经网络和与局部识别块注意力卷积神经网络、全局注意力卷积神经网络连接的双向长短期记忆网络。

7.根据权利要求1‑6任一项所述的方法,其特征在于,所述双向长短期记忆网络还包括中隐藏层、全连接层以及隐藏层与全连接层之间的Dropout层。

8.一种基于ACNN和Bi‑LSTM的微表情识别系统,其特征在于,所述系统包括:待检测图像获取模块,用于获取待检测人员的连续时间的多帧表情图像;

表情类别识别模块,用于将所述多帧表情图像输入微表情识别模型,得到所述待检测人员的表情所属类别;其中,所述微表情识别模型包括初始特征向量提取网络、与初始特征向量提取网络连接的局部识别块注意力卷积神经网络、与初始特征向量提取网络连接的全局注意力卷积神经网络和与局部识别块注意力卷积神经网络、全局注意力卷积神经网络连接的双向长短期记忆网络。

9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。

10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。