1.一种基于物联网云平台的瘫痪病人智能看护系统,其特征在于,包括:远程控制端(1)、云平台控制模块(2)和智能看护设备(3);
所述远程控制端(1),包括第一通信模块、存储模块、人机交互模块,第一通信模块、存储模块分别用于接收和存储智能看护设备(3)所采集的脑电信号、瘫痪病人的头部正面图像、本地场景的双目视频图像,以及智能看护设备(3)对云平台控制模块(2)、人机交互模块对其所发出的工作指令的完成情况;
所述云平台控制模块(2),根据远程控制端(1)传送来的脑电信号、瘫痪病人的头部正面图像、本地场景的双目视频图像,评判智能看护设备(3)需要执行的任务,并向智能看护设备(3)发出控制指令;
所述智能看护设备(3),包括第二通讯模块、运动行走模块(4)、双目相机模块(5)、机械臂模块(6)、脑电信号采集模块(7);
所述脑电信号采集模块(7),用于采集瘫痪病人的脑电波信号,并完成脑电波信号的解析;
所述运动行走模块(4)为带有第一控制单元、并由电机驱动的轮椅,能够接收人机交互模块、云平台控制模块(2)的控制指令并执行;
所述双目相机模块(5)包括第二控制单元、双目摄像头,用于根据人机交互模块、云平台控制模块(2)的控制指令实时采集瘫痪病人的头部正面图像、本地场景的双目图像;
所述机械臂模块(6)包括第三控制单元和机械手臂,能够根据远程控制端(1)、云平台控制模块(2)的控制指令,并执行所规划的运动路径和相应抓取、喂送动作;
第二通讯模块用于将脑电信号采集模块(7)、双目相机模块(5)所采集的信号传输通过给远程控制端(1),并接收远程控制端(1)、云平台控制模块(2)的控制指令。
2.根据权利要求1所述的基于物联网云平台的瘫痪病人智能看护系统,其特征在于,所述远程控制端(1)还包括显示模块,所述显示模块为三维场景显示模块(9)或双目视频透视显示模块(8)。
3.根据权利要求1所述的基于物联网云平台的瘫痪病人智能看护系统,其特征在于,所述远程控制端(1)的人机交互模块输入的指令优先于云平台控制模块(2)决策的工作指令。
4.根据权利要求1所述的基于物联网云平台的瘫痪病人智能看护系统,其特征在于,还包括移动终端,所述移动终端能够实时获取远程控制端(1)中各个智能看护设备(3)的运行状态,并能够对智能看护设备(3)发出控制指令。
5.根据权利要求1所述的基于物联网云平台的瘫痪病人智能看护系统,其特征在于,所述脑电信号采集模块(7)通过以下方式采集和解析脑电信号:步骤S1、通过非侵入式蓝牙头戴脑电波采集设备采集瘫痪病人的脑电波信号;
步骤S2、信号校核:对采集的脑电波信号进行检查校核;
步骤S3、脑电波信号解析:通过步骤S2若信号校核正确,则对采集到的脑电波信号进行解析;若信号校核不正确,舍弃该组信号;解析后的数据包括0-3Hz的δ波、4-7Hz的θ波、8-
10Hz的低α波、11-13Hz的高α波、14-22Hz的低β波、22-30Hz高β波、31-45Hz低γ波、46Hz以上的高γ波,共8类脑电波数据;
利用eSense指数描述被测试者专注度,计算专注度公式:
专注度:Pa=(mγ+nβ+tα)×100
Pa表示专注度,γ、β、α分别表示γ波、β波、α波在脑电信号能量中的百分比,m、n、t分别表示γ波、β波、α波的权重系数,通过层次分析法可获得;
步骤S4、脑电波数据传输:通过本地网络控制将采集到的脑电波数据传输至所述云平台控制模块(2)。
6.根据权利要求1所述的基于物联网云平台的瘫痪病人智能看护系统,其特征在于,所述云平台控制模块(2)对运动行走模块(4)的控制方法为:步骤J1、当检测到通过所述双目相机模块(5)传输的图像数据中瘫痪病人头顶部向前倾,同时,当通过所述脑电信号采集模块(7)传输来的脑电波数据的专注度达到阈值;
步骤J2、云平台控制模块(2)向所述双目相机模块(5)发出调整姿态为能够获取前方场景图像的指令,双目相机模块(5)实时获取前方场景图像并传输到远程控制端(1),并通过显示模块呈现;
步骤J3、云平台控制模块(2)对前方场景图像中的各障碍物和道路采用深度学习算法进行实时检测,并显示在显示模块的画面中;
步骤J4、再根据检测出的障碍物和道路情况,规划出前进路线,实时传输给所述运动行走模块(4)执行该行走指令,运动行走模块(4)经执行情况反馈给远程控制端(1),并呈现在显示模块的画面中。
7.根据权利要求6所述的基于物联网云平台的瘫痪病人智能看护系统,其特征在于,所述云平台控制模块(2)中设定关注度阈值为80。
8.根据权利要求6述的基于物联网云平台的瘫痪病人智能看护系统,其特征在于,所述步骤J3之后,通过人机交互模块的输入指令替换云平台控制模块(2)规划前进路线的指令。
9.根据权利要求6或8述的基于物联网云平台的瘫痪病人智能看护系统,其特征在于,所述云平台控制模块(2)对机械臂的运动路径和相应抓取、喂送动作规划方法为:步骤K1、激活机械臂:当从所述双目相机模块(5)传输的图像数据中检测到瘫痪病人嘴巴一直张开,同时,通过所述脑电信号采集模块(7)传输来的脑电波数据的专注度达到阈值,激活机械臂;
步骤K2、待抓取物品的选择:所述机械臂依次指向不同的物品,同时,通过所述脑电信号采集模块(7)传输来的脑电波数据的专注度是否达到阈值,确定专注度达到阈值的物品;
步骤K3、抓取路径和动作规划:此时所述云平台控制模块(2)双目相机模块(5)采集……图像,并根据所述双目相机模块(5)采集的双目图像计算所述机械臂末端手爪和所确定物品的相对位置关系,规划出抓取路径和动作并发送给所述机械臂模块(6)执行;
步骤K4、喂送路径和动作规划:根据所述双目相机模块(5)传输的双目图像计算嘴巴在空间中的位姿以及与所述机械臂末端手爪的相对位置关系,规划出机械臂末端手爪的喂送路径和动作并发送给所述机械臂模块(6)执行。
10.根据权利要求9述的基于物联网云平台的瘫痪病人智能看护系统,其特征在于,所述步骤K3可通过人机交互模块的输入指令替换云平台控制模块(2)规划的自主抓取、喂送路径规划。