欢迎来到知嘟嘟! 联系电话:13336804447 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13336804447
知嘟嘟经纪人
收藏
专利号: 2022102312290
申请人: 南京邮电大学
专利类型:发明专利
专利状态:已下证
专利领域: 计算;推算;计数
更新日期:2026-11-16
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.一种课堂考勤管理方法,用于云端服务器,其特征在于:所述方法包括:

步骤S1:接收客户端发送的识别请求,识别请求包括课程编号、班级编号和教室编号,根据所述识别请求中课程编号和班级编号从数据库获取对应班级学生信息表L;根据所述教室编号调动教室内相应图像采集设备开始进行图像采集;

步骤S2:接收边缘计算设备发送的待识别信息M,所述待识别信息M包括:人脸特征信息F、所述人脸特征信息F是由教室内相应的图像采集设备获取的原始人脸图像P1在边缘计算设备中经检测对齐和特征提取两个操作过程形成的特征向量P3;

步骤S3:根据所述学生信息表L调取信息表中所有学生预先采集的信息M0,预先采集的学生信息M0包括:姓名、班级和预先采集人脸特征F0;将预先采集的人脸特征F0与现场获取的人脸特征信息F进行匹配,根据匹配结果显示已出勤学生名单和未出勤学生名单;

其中,本发明采用的边缘计算设备为JetsonNano开发板;采用MTCNN模型和SSH模型对原始人脸图像P1检测对齐输出初步处理图像集合P2;采用FaceNet模型对图像集合P2进行特征提取形成特征向量P3。

2.根据权利要求1所述的一种课堂考勤管理方法,其特征在于:所述采用MTCNN模型和SSH模型对原始人脸图像P1检测对齐输出初步处理图像集合P2,具体步骤包括:MTCNN模型处理过程:对原始人脸图像P1进行图像预处理,将原图像缩小其尺寸,直至得到12像素图像即生成图像金字塔,将图像金字塔逐个输入到P‑Net中;通过P‑Net快速产生大量预备检测窗口并进行结果校正,然后使用非极大值抑制函数(NMS)除去重合率低于阈值的窗口;使用R‑Net过滤掉绝大部分非人脸候选窗口,最后使用NMS进行合并;重新利用能力更加强的网络找到人脸候选窗口上面的五个标记位置,这个阶段的网络模型简称为O‑Net,对第二阶段数据输入,经过改网络处理和识别优化,最终得到人脸标定的5个位置;

SSH模型处理过程:对VGG不同的卷积输出层做了3个分支,包括:分支M1,使用高分辨率的特征图去检测小脸;分支M2,用中间分辨率的特征图去检测中等大小的脸;分支M3用低分辨率的特征图去检测大脸,每个分支都使用类似的流程预测检测和分类结果;

将采用MTCNN模型和SSH模型两个模型的处理结果进行concat拼接处理,输出图像P2。

3.根据权利要求1所述的一种课堂考勤管理方法,其特征在于:所述采用FaceNet模型对图像P2进行特征提取形成图像特征向量P3,具体步骤包括:将通过所述MTCNN算法和SSH模型检测并对齐后的图像进行concat拼接得到P2,将P2输入FaceNet,通过将图像P2经过卷积神经网络归一化映射到欧式空间,输出图像特征向量P3;计算欧式空间举例得到其相似度检测结果。

4.根据权利要求1所述的一种课堂考勤管理方法,其特征在于:所述图像采集次数为两次,在云端服务器收到请求后立即调动图像采集设备开始图形采集并根据上述步骤输出匹配结果作为第一次考勤结果,并设定在间隔1‑15分钟后,自动启动第二次图像采集,输出匹配记过作为第二次考勤结果,第一次考勤结果与第二次考勤结果进行比较,第二次考勤结果多出的学生名单为迟到人员,第二次考勤结果仍未匹配上的即为旷课人员。

5.根据权利要求1所述的一种课堂考勤管理方法,其特征在于:所述图像采集此处可以增加到至少三次,通过不同次数之间的考勤结果的比较,获取旷课人员名单和在不同时间段迟到的人员名单。

6.根据权利要求1所述的一种课堂考勤管理方法,其特征在于:边缘计算设备为JetsonNano开发板。

7.一种课堂考勤管理系统,所述系统包括:图像采集设备、边缘计算设备、权利要求1‑6中任意一项所述的云端服务器、客户端设备;

所述图像采集设备,用于接受客户端发送的识别请求,启动并获取当下教室内所有人员的原始人脸图像P1,并传输至边缘计算设备处理;

所述边缘计算设备,用于处理图像采集设备发送的原始人脸图像P1,对图像P1进行检测、对齐和特征提取;

所述云端服务器设备,用于接收客户端发送的识别请求,识别请求包括课程编号、班级编号和教室编号,根据所述识别请求中的课程编号和班级编号从数据库获取对应班级学生信息表L;根据所述教室编号调动教室内相应的图像采集设备开始进行图像采集;接收边缘计算设备发送的待识别信息M,所述待识别信息M包括人脸特征信息F;根据所述学生信息表L调取信息表中所有学生预先采集的信息M0,预先采集的学生信息M0包括:姓名、班级和预先采集人脸特征F0;将预先采集的人脸特征F0与现场获取的人脸特征信息F进行匹配,根据匹配结果显示已出勤学生名单和未出勤学生名单;

所述客户端设备,用于发送识别请求并输入识别请求信息。