1.一种基于深度神经网络的听诊器音频识别方法,其特征在于,包括:S1:采集心脏听诊音频数据并标注出每条录音数据中心脏跳动音频的起始和结束位置,将标注后的录音数据划分为训练集、验证集和测试集;
S2:构建听诊器音频识别模型,利用所述训练集训练所述听诊器音频识别模型,得到训练后的听诊器音频识别模型;
S3:基于所述训练后的听诊器音频识别模型,输入待测心脏听诊音频数据,得到心脏听诊录音识别结果,利用所述心脏听诊录音识别结果辅助医生出具病情诊断结果;
其中,所述听诊器音频识别模型是由频谱分块转换模块、位置编码模块、多个堆叠的音频帧依赖关系捕捉模块和一个线性分类器依次连接构建而成,所述频谱分块转换模块包括依次连接的对数梅尔滤波器组、频谱分块模块和维度变换模块。
2.根据权利要求1所述的基于深度神经网络的听诊器音频识别方法,其特征在于:得到训练后的听诊器音频识别模型的方法包括:对所述训练集的音频数据进行分帧和加窗处理,得到音频帧数据;
利用所述对数梅尔滤波器组处理所述音频帧数据,得到特征频谱图,通过所述频谱分块模块将所述特征频谱图均匀划分为多个频谱块,利用所述维度变换模块将每个频谱块展平并转换为一维音频帧序列;
所述位置编码模块对每个音频帧序列进行位置编码,并将编码后的位置信息添加到每个音频帧序列中,得到包含位置信息的音频帧序列;
利用所述音频帧依赖关系捕捉模块捕捉所述包含位置信息的音频帧序列之间的长距离依赖关系,进而提取出音频特征信息;
通过线性分类器对所述音频特征信息进行分类,对所述听诊器音频识别模型进行训练,直到满足所述听诊器音频识别模型的损失值小于设定阈值的条件,得到训练后的听诊器音频识别模型。
3.根据权利要求2所述的基于深度神经网络的听诊器音频识别方法,其特征在于:得到特征频谱图的具体方法包括:通过快速傅里叶变换计算得到每个音频帧数据的频谱;
基于音频帧数据的频谱,设置对数梅尔滤波器组中的过滤器数量M、频率范围为(在梅尔刻度上两两对数梅尔滤波器之间的中心频率是等间距的,根据最低梅尔频率Mel(根据所述中心梅尔频率距离
基于每个对数梅尔滤波器的中心频率
其中,
基于所述与中心频率
4.根据权利要求2所述的基于深度神经网络的听诊器音频识别方法,其特征在于:所述频谱块的数量N计算公式为:
5.根据权利要求2所述的基于深度神经网络的听诊器音频识别方法,其特征在于:所述包含位置信息的音频帧序列定义所有一维音频帧序列为
6.根据权利要求1所述的基于深度神经网络的听诊器音频识别方法,其特征在于:所述心脏听诊音频数据包括心脏跳动音频和其他音频片段,所述其他音频片段包括高斯噪声、说话声、呼吸声和听诊器摩擦声。
7.一种基于深度神经网络的听诊器音频识别系统,其特征在于,所述系统用于实现权利要求1至6任意一项所述的基于深度神经网络的听诊器音频识别方法,具体包括:数据获取模块,用于采集心脏听诊录音数据并标注出每条录音数据中心脏跳动声音的起始和结束位置,将标注后的录音数据划分为训练集、验证集和测试集;
听诊器音频识别模型构建及训练模块,用于构建听诊器音频识别模型,利用所述训练集训练所述听诊器音频识别模型,得到训练后的听诊器音频识别模型;
音频识别模块,用于基于所述训练后的听诊器音频识别模型,输入待测心脏听诊录音数据,得到心脏听诊录音识别结果,利用所述心脏听诊录音识别结果辅助医生出具病情诊断结果;
其中,所述听诊器音频识别模型是由频谱分块转换模块、位置编码模块、多个堆叠的音频帧依赖关系捕捉模块和一个线性分类器依次连接构建而成,所述频谱分块转换模块包括依次连接的对数梅尔滤波器组、频谱分块模块和维度变换模块。
8.一种基于深度神经网络的听诊器音频识别装置,其特征在于,包括如权利要求7所述的基于深度神经网络的听诊器音频识别系统、拾音传感器、信号预处理模块、功放模块、主控单元、传输模块、云端服务器和终端设备,所述拾音传感器连接所述信号预处理模块,所述信号预处理模块分别与所述功放模块和所述主控单元连接,所述主控单元通过所述传输模块与所述终端设备连接,所述识别系统部署在所述云端服务器上,所述云端服务器与所述终端设备无线连接;
其中,所述拾音传感器获取待测心脏音频数据发送给所述功放模块,所述信号预处理模块将所述心脏听诊录音数据进行预处理后经由所述功放模块在听诊器的听筒处播放,所述信号预处理模块同时还将预处理后的音频数据经所述主控单元、所述传输模块发送给所述云端服务器进行识别,所述识别系统将待测音频数据的识别结果反馈在所述终端设备的显示界面上。
9.一种听诊器,其特征在于,利用如权利要求8所述的基于深度神经网络的听诊器音频识别装置得到待测心脏音频数据的识别结果。
10.一种计算机存储介质,其特征在于,所述计算机存储介质存储有计算机软件产品,所述计算机软件产品包括的若干指令,用以使得一台计算机设备执行如权利要求1至6中任意一项所述的基于深度神经网络的听诊器音频识别方法。