基于表情识别的课堂专注度分析的研究

来源 :山西大学 | 被引量 : 5次 | 上传用户:wsmkt
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在课堂中提升并保持学生的专注度,可以有效地提高课堂教学质量并帮助学生课后复习与理解,因此及时分析和统计学生的课堂表现是很有必要的。本文设计并实现了基于表情识别的课堂专注度分析系统,将拍摄得到的课堂真实图像通过人脸检测和人脸识别方法完成课堂考勤的统计,结合表情识别方法对学生的专注度情况进行分析,最后将数据可视化推送给学生和家长,可以有效提高教学质量。但是课堂中前后排学生的距离和人数较多等不可抗因素,使得图像中的学生人脸大致表现为前排人脸较清晰,而后排学生人脸尺寸较小,而且遮挡问题也对学生的人脸检测和之后专注度分析带来了困难。针对上述问题,本文研究了基于深度学习的人脸检测和表情识别方法,详细介绍了卷积神经网络的原理和基础模块,列举了当前人脸检测和表情识别方法中存在的问题和不足,分析了影响小脸检测的原因和模型压缩的必要性,提出了一种基于卷积神经网络的多尺寸人脸检测方法和轻量级卷积神经网络的表情识别方法。本文的主要工作如下:1.卷积神经网络中浅层特征图中局部感受野较小有助于定位,但缺乏全局特征,而高层次的特征具有丰富的语义信息,但特征图分辨率较低不利于小目标的检测。针对上述人脸检测问题,本文首先提取ResNet101基础网络中不同层输出的特征,自顶向下使用反卷积将高层特征图的分辨率放大,并与其相邻的低层特征侧边连接,得到融合后的有丰富语义信息和空间细节的特征图,主要解决了只使用最高层特征图的人脸检测方法忽略低层空间定位信息的问题。提出通道注意力和空间注意力共同作用的混合注意力机制,加强关键特征通道和特征图区域的表达,同时弱化无关信息的干扰。通过在WIDER FACE数据集进行对比实验,实验结果验证了本文方法对小脸检测的有效性。2.卷积神经网络的层数加深,使得模型参数量不断增加,会造成额外的计算成本和耗费,甚至导致过拟合及网络退化现象的现象。为了降低冗余参数量,本文提出了轻量级卷积神经网络对现有的神经网络进行压缩。使用3 × 3的深度可分离卷积模块和连续非对称卷积改进Inception结构,并引入残差网络实现跨层连接。有效降低了神经元之间连接的复杂度,加宽了网络并获得了不同尺度的特征。本文使用中心损失函数和softmax损失函数缩小了类间距离。使用基于生成对抗网络的SRGAN方法放大FER2013训练集整的图像,提高模型的准确率。在FER2013数据集中进行了对比实验,最后的混淆矩阵和实验结果验证了本文方法在表情识别上的提高。3.本文基于上述人脸检测和表情识别算法,设计了基于表情识别的课堂专注度分析系统,实现课堂图像的实时采集和处理,使用人脸检测和人脸识别方法完成学生课堂考勤记录,并结合人脸检测和表情识别从学生的面朝黑板的人脸完整度及面部表情分析学生的专注度,对学生的课堂数据可视化展示,为师生及家长提供了更多的数据支持和帮助。
其他文献
去年年底,习近平总书记在一份材料上作出重要批示,强调2019年要解决一些困扰基层的形式主义问题,切实为基层减负。近日,中共中央办公厅印发《关于解决形式主义突出问题为基层
母牛的繁殖力高低直接影响着肉牛养殖经济效益,母牛繁殖力较好的情况下可以实现一年一胎,如果繁殖力较差,母牛产后发情排卵延迟、配种受胎率低,则无法达到这一标准。而母牛的
目的观察替罗非班桥接常规抗血小板治疗对早期磁共振灌注成像-弥散成像(PWI-DWI)不匹配脑梗死的疗效。方法60例PWI-DWI不匹配大脑中动脉供血区脑梗死患者随机采用阿司匹林肠
为了有效避免无线传感网络(WSNs)中的热点问题,常利用移动信宿收集数据。信宿依据预定路线遍历预定的驻留点(RPs)。而其他传感节点就将数据传输至离自己最近的驻留点。因此,
目的:现以王檀教授多年来治疗肺痹的临床实践为基础,对王檀教授近年来春季诊治的所有肺痹病例进行全面收集、整理,通过对病例的证候及方药统计和分析来归纳王檀教授春季治疗肺痹的用药特点,分析和探讨王檀教授治疗肺痹临床经验及学术思想,为临床治疗肺痹提供参考及借鉴。方法:通过对2015年01月—2018年01月(立春-立夏之间)长春中医药大学附属医院肺病科王檀主任门诊肺痹患者的病例进行收集整理,将患者的一般情
报道9例微粒皮肤移植术在Ⅲ度烧伤创面修复中的应用。其中8例取得优良效果。文中介绍了临床应用的体会。对手术操作方法有所改进。提出了应用去表层微粒皮肤移植的新方法,不
多孔结构的纺织品易吸收人体汗腺和皮脂腺排出的汗液和皮脂,为致病微生物提供了良好的生长和繁殖环境,而致病微生物给人类带来了诸如疾病传播、食物变质、衣服菌斑等隐患。随
依托国民教育资源定向培养士官,是贯彻落实习主席建立军民融合创新体系、军地共育士官人才重要指示精神的重大举措。湖南X高职院校2003年被确定为直招士官试点单位,2012年被