基于深度学习的课堂状态分析系统设计与实现

来源 :河北工程大学 | 被引量 : 0次 | 上传用户:blacksi
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来随着人工智能和深度学习的迅速发展,众多高校提出了实现校园数字化、智能化和教育信息化的目标。在整个授课与学习过程中,课堂状态是评估学生对课程接受情况和授课质量的重要参考因素。但是目前主要是通过人工方式进行课堂状态分析,会分散教师注意力,因此找到一种可以提高课堂状态分析效率的方法具有很大的研究意义。论文选择离线方式利用深度学习的方法,对一节次上课录屏视频以帧为单位从学生上课行为和出勤情况两个方面进行状态分析,其中学生行为识别部分由改进的目标检测算法完成,出勤情况分析使用人脸识别方法实现。主要内容如下:(1)SSD算法改进。通过分析SSD模型结构,针对其基础网络参数量大和对小目标检测效果不好的特点,提出了改进的SSD模型。将主干网络替换为改进后的Mobilenet网络,利用深度可分离卷积网络的特点减少网络参数提高运算速度;把更深层特征图中的信息向上融合到浅层中,以此提高小目标识别的准确率。最后在网络中融入RMSProp优化算法,实现网络模型优化加快了模型收敛速度。(2)学生行为数据集采集和预处理。通过网络搜索和实际拍摄的方式得到包含举手、端坐、写字、睡觉、玩手机五种行为2500张图像,作为目标检测数据集。为了保证模型效果、不增加模型训练难度,在训练之前首先对所有的图像进行了预处理。(3)状态分析和考勤的实现。使用Open CV库中自带的方法对课堂录屏视频进行帧提取,并将其作为学生行为识别和人脸识别的图像数据来源。分别用改进的行为识别模型和MTCNN-Insightface人脸识别方法识别提取到的视频帧,得到某帧中五种行为各自人数,以及上课学生出勤情况。其中行为识别时在一节课中需要提取多帧,而人脸识别只需要一帧即可。(4)高校课堂状态分析系统的设计与实现。使用Flask+vue框架搭建系统,将改进的行为识别方法和人脸识别方法融入系统,实现离线课堂状态的分析。将系统分为教师端和管理端,教师端负责上传课程录屏,管理端负责随时随机分析学生状态和出勤情况,两者结合形成了便捷全面的课堂状态分析系统平台。
其他文献
目的探讨心理护理干预对女性压力性尿失禁(SUI)患者的效果。方法 100例女性SUI患者,按照单双号分为研究组和对照组,每组50例。对照组采用常规护理干预,研究组在常规护理基础
<正>习近平《论中国共产党历史》是一部重要的党史著作,不仅阐述了党史是"最好的教科书""最好的营养剂""最好的清醒剂",阐述了在中国特色社会主义进入新时代的历史条件下,开
<正>近年来,越来越多的青年才俊选择加入到公务员队伍,将实现个人价值与服务人民群众、服务经济社会发展深度融合,既为各级党政机关补充了新鲜血液,也为地方的持续发展添加了
<正>党的十八大以来,习近平总书记对在新的历史条件下坚持"三会一课"制度提出明确要求,强调在严格党内生活制度方面,"一个是坚持,一个是加强,一个是创新"。党的十报告中,习近
背景与目的:糖尿病肾病(diabetic nephropathy,DN)是全球范围内终末期肾脏病(end-stage renal disease,ESRD)的首位病因,在我国是第二位病因且数量仍在持续增多,严重影响国民
为揭示西辽河平原灌区3种主要灌溉方式(浅埋滴灌、膜下滴灌、传统畦灌)下春玉米水氮吸收利用效率差异的生理机制,2017-2018年在通辽市科尔沁区农牧高新科技示范园区,以农华10
江山就是人民,人民就是江山.rn习近平总书记在党史学习教育大会上强调,要把学习党史同总结经验、观照现实、推动工作结合起来,同解决实际问题结合起来,开展好“我为群众办实
多元比例响应数据具有有界性、归一性以及分量取值稀疏性等特点。本文在多项分布拟似然框架下基于贝叶斯方法研究多元比例数据的估计及其推断问题。通过引入Polya-Gamma分布
随着油气田开发理论与研究的发展,对储层物理模型的需求越来越迫切,同时对储层物理模型性能控制水平的要求也越来越高,因此本文对储层物理模型参数的调控方法展开研究。通过
本文利用低温衰减器法实现了低温低噪声放大器等效噪声温度精确与快速测量,以常规噪声系数测试仪和制冷设备构建了低温测试平台,使用该平台测试了三款不同频段低温放大器的噪