1.一种基于多模态信号识别的脑机接口方法,包括脑机接口系统,其特征在于:所述脑机接口系统包括主机(100)、显示屏(200)、眼动仪(300),所述主机(100)包括微处理器(101)、脑电波信号采集模块(102)、脑电波信号分析模块(103)、耳夹式红外心率采集模块(104)、心率信号分析模块(105),所述显示屏(200)包括显示模块(201)、定位捕捉模块(202)、数据反馈模块(203);
该脑机接口方法具体包括以下步骤:
S1.设备启动采集脑电波信号;
S2.分析脑电波信号并生成对应动作意识;
S3.显示屏显示动作意识是否启动界面;
S4.用户通过视线集中来选择是否启动动作意识,“是”则进入下一步骤,“否”则不执行动作意识命令;
S5.显示屏进入详细选择界面,用户通过实现集中在具体选择界面来确定动作意识;
S6.在进入动作意识详细选择界面时,通过分析用户的心率波动情况来对动作意识进行最终确认,波动较大代表选择错误,退回上一步重新选择,波动较小代表选择正确,执行动作意识。
2.根据权利要求1所述的一种基于多模态信号识别的脑机接口方法,其特征在于:所述S1中采用脑电波信号采集模块(102)来采集信号,所述脑电波信号采集模块(102)选用非侵入式头戴电极片。
3.根据权利要求1所述的一种基于多模态信号识别的脑机接口方法,其特征在于:所述S2中的具体过程为,脑电波信号分析模块(103)对脑电波信号采集模块(102)传递的信号进行转换分析成动作意识,然后传递到微处理器(101)。
4.根据权利要求1所述的一种基于多模态信号识别的脑机接口方法,其特征在于:所述微处理器(101)与显示屏(200)电连接,所述眼动仪(300)与显示屏(200)的显示模块(201)电连接,且所述眼动仪(300)设置在显示屏(200)的前端底部。
5.根据权利要求4所述的一种基于多模态信号识别的脑机接口方法,其特征在于:所述眼动仪(300)的指针在显示模块(201)上显示,当指针停留在显示屏(200)界面任意位置3秒后,默认在该处位置点击确认命令,相当于鼠标双击一次。
6.根据权利要求5所述的一种基于多模态信号识别的脑机接口方法,其特征在于:所述定位捕捉模块(202)与显示模块(201)、数据反馈模块(203)电连接,所述定位捕捉模块(202)用于确认眼动仪(300)在显示屏(200)上的具体位置,并将信息给到数据反馈模块(203)。
7.根据权利要求1所述的一种基于多模态信号识别的脑机接口方法,其特征在于:所述数据反馈模块(203)与微处理器(101)电连接,数据反馈模块(203)将显示屏(200)中产生的电信号传递到微处理器(101)中。
8.根据权利要求1所述的一种基于多模态信号识别的脑机接口方法,其特征在于:所述耳夹式红外心率采集模块(104)选用耳夹式红外心率传感器,戴在用户耳后,且与心率信号分析模块(105)电连接,所述心率信号分析模块(105)与微处理器(101)电连接。