1.一种患者的负性情绪监测系统,其特征在于,包括:病人数据获取模块,用于获取预定时间段病人的脑电信号、所述预定时间段病人的人脸监控视频和所述预定时间段病人的生理指标信息;
病人脑电信号特征提取模块,用于对所述预定时间段病人的脑电信号进行特征提取与编码以得到病人脑电关联特征矩阵;
病人人脸监控特征提取模块,用于将所述预定时间段病人的人脸监控视频通过具有三维卷积核的人脸特征提取模块以得到病人人脸情绪特征矩阵;
病人人脸情绪-脑电关联模块,用于将所述病人人脸情绪特征矩阵和所述病人脑电关联特征矩阵融合以得到病人人脸情绪-脑电关联融合特征矩阵;
病人生理特征提取模块,用于将所述预定时间段病人的生理指标信息通过基于转换器的病人生理指标特征提取器以得到病人生理特征矩阵;
病人情绪特征融合模块,用于将所述病人人脸情绪-脑电关联融合特征矩阵和所述病人生理特征矩阵进行融合以得到病人负性情绪特征矩阵;
矩阵展开模块,用于将所述病人负性情绪特征矩阵展开为病人负性情绪特征向量;
优化模块,用于对所述病人负性情绪特征向量进行基于类概率的等效模型参数空间表达以得到优化病人负性情绪特征向量;
病人负性情绪判别模块,用于分析所述优化病人负性情绪特征向量,得到病人的负性情绪等级的结果。
2.根据权利要求1所述的患者的负性情绪监测系统,其特征在于,所述病人脑电信号特征提取模块,包括:脑电采样窗提取单元,用于以预设采样窗从所述预定时间段病人的脑电信号中沿时序截取多个脑电采样窗;
脑电时频特征提取单元,用于分别从各个所述脑电采样窗中提取脑电时域特征和脑电频域特征;
脑电时频特征向量化单元,用于将各个所述脑电采样窗的脑电时域特征和脑电频域特征分别排列为脑电时域输入向量和脑电频域输入向量;
脑电时-频域关联单元,用于计算所述脑电时域输入向量的转置和所述脑电频域输入向量之间的向量相乘以获得各个所述脑电采样窗的脑电时-频域关联矩阵;
脑电时频关联特征提取单元,用于将所述各个所述脑电采样窗的脑电时-频域关联矩阵构造为三维的脑电时-频域关联三维张量后通过具有三维卷积核的脑电时频特征提取模块以得到病人脑电关联特征矩阵。
3.根据权利要求2所述的患者的负性情绪监测系统,其特征在于,所述脑电时频特征提取单元,用于:分别从各个所述脑电采样窗中提取X1,X2...Xn作为所述脑电时域特征以及y1,y2...yn作为所述脑电频域特征。
4.根据权利要求3所述的患者的负性情绪监测系统,其特征在于,所述脑电时频特征提取模块为具有三维卷积核的卷积神经网络模型。
5.根据权利要求4所述的患者的负性情绪监测系统,其特征在于,所述病人人脸监控特征提取模块,包括:病人人脸监控关键帧提取单元,用于以预定的采样频率从所述预定时间段病人的人脸监控视频中提取出多个病人人脸监控关键帧;
病人人脸情绪特征提取单元,用于将所述多个病人人脸监控关键帧通过所述具有三维卷积核的人脸特征提取模块以得到病人人脸情绪特征矩阵。
6.根据权利要求5所述的患者的负性情绪监测系统,其特征在于,所述病人生理指标特征提取器是包含嵌入层的基于转换器的上下文编码器模型。
7.根据权利要求6所述的患者的负性情绪监测系统,其特征在于,所述病人情绪特征融合模块,用于:以如下级联公式将所述病人人脸情绪-脑电关联融合特征矩阵和所述病人生理特征矩阵进行融合以得到病人负性情绪特征矩阵;
其中,所述级联公式为:
其中,
8.根据权利要求7所述的患者的负性情绪监测系统,其特征在于,所述优化模块,包括:类别概率激活单元,用于将所述病人负性情绪特征向量通过softmax激活函数以得到类别概率向量;
联合概率分布计算单元,用于计算所述病人负性情绪特征向量相对于所述类别概率向量的联合概率分布以得到类概率引导病人负性情绪特征向量;
模型参数隐空间映射单元,用于将所述类概率引导病人负性情绪特征向量通过基于全连接层的模型参数隐空间映射器以得到等效模型参数空间下病人负性情绪特征向量;
优化单元,用于以如下优化公式对所述等效模型参数空间下病人负性情绪特征向量和所述病人负性情绪特征向量进行特征交互以得到所述优化病人负性情绪特征向量,其中,所述优化公式为:其中,
9.根据权利要求8所述的患者的负性情绪监测系统,其特征在于,所述病人负性情绪判别模块,用于:将所述优化病人负性情绪特征向量通过分类器以得到分类结果,所述分类结果用于表示病人的负性情绪等级。
10.一种患者的负性情绪监测方法,其特征在于,包括:获取预定时间段病人的脑电信号、所述预定时间段病人的人脸监控视频和所述预定时间段病人的生理指标信息;
对所述预定时间段病人的脑电信号进行特征提取与编码以得到病人脑电关联特征矩阵;
将所述预定时间段病人的人脸监控视频通过具有三维卷积核的人脸特征提取模块以得到病人人脸情绪特征矩阵;
将所述病人人脸情绪特征矩阵和所述病人脑电关联特征矩阵融合以得到病人人脸情绪-脑电关联融合特征矩阵;
将所述预定时间段病人的生理指标信息通过基于转换器的病人生理指标特征提取器以得到病人生理特征矩阵;
将所述病人人脸情绪-脑电关联融合特征矩阵和所述病人生理特征矩阵进行融合以得到病人负性情绪特征矩阵;
将所述病人负性情绪特征矩阵展开为病人负性情绪特征向量;
对所述病人负性情绪特征向量进行基于类概率的等效模型参数空间表达以得到优化病人负性情绪特征向量;
分析所述优化病人负性情绪特征向量,得到病人的负性情绪等级的结果。