基于多特征的在线课堂专注度识别研究

来源 :安徽建筑大学 | 被引量 : 0次 | 上传用户:ws1984003
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,在线课堂凭借学习时间可控、学习内容可选、学习地点灵活等优势受到广大学者的追捧,2020年初爆发的新冠疫情也给在线教育带来了前所未有的发展机遇。然而,在线课堂盛行的同时,也逐渐显露出它的不足。其中最大的不足在于教师无法实时监测到学习者的在线学习状况,从而无法了解学习者的课堂专注度,这也造成了很多在线课堂注册率很高但通过率却很低的现象。本文针对在线课堂专注度识别困难的现状问题,旨在无需借助特殊的穿戴设备,仅通过学习者在线课堂中使用的多媒体设备自带摄像头采集其在课堂上的学习数据。论文利用学习者的多个特征对其课堂专注度进行识别,先是通过学习者的面部表情特征对在线课堂专注度进行识别,再是通过学习者的头部姿态特征对在线课堂专注度进行识别,最后是融合面部表情特征和头部姿态特征对在线课堂专注度进行识别,主要研究内容如下:(1)建立在线课堂人脸图像数据集。由于在线课堂专注度的公开数据集为数不多,且相关识别研究较少,本文构建了基于多被试者在真实网络环境下的在线课堂人脸图像数据集,共有3025张图像。此外,本文对该数据集进行了在线课堂专注度和在线课堂情绪的多标签任务,即每张图像具有两种标签。(2)提出了基于面部表情特征的在线课堂专注度识别模型。首先在学习者的面部表情特征提取方面,本文使用了两种特征提取方法,第一种方法是基于面部ROI自动分割的面部表情Gabor特征提取,第二种方法是基于多卷积神经网络的面部表情特征提取,并通过SVM分类器对在线课堂情绪进行分类;其次通过在线课堂情绪和在线课堂专注度之间的等级度量关系,在自建的在线课堂人脸图像数据集上对学习者的在线课堂专注度进行识别;最后,实验表明基于多卷积神经网络的面部表情特征提取方法对在线课堂专注度的识别准确率较高,达到了76.2%。(3)提出了基于头部姿态特征的在线课堂专注度识别模型。首先通过基于脸部关键点和基于无脸部关键点的两种方法对学习者的头部姿态欧拉角特征进行提取,分别建立起学习者头部姿态欧拉角数据集D1和D2;其次分别对这两个数据集中的头部姿态特征进行扩充,将原始三维特征向量构造为六维特征向量,形成新的头部姿态欧拉角数据集K1和K2,然后利用贝叶斯神经网络模型在K1和K2数据集上进行在线课堂专注度的识别;最后,实验表明基于无脸部关键点的头部姿态欧拉角特征提取方法对在线课堂专注度的识别准确率较高,达到了72.0%。(4)提出了基于多特征融合的在线课堂专注度识别模型。主要将面部表情识别模型和头部姿态识别模型进行融合,通过决策融合的方法来预测在线课堂专注度。在决策融合方式上,采取了最大值融合和权重融合。实验结果表明,基于多特征融合的在线课堂专注度识别准确率均高于基于单一特征的在线课堂专注度识别准确率,且采取权重融合方式的识别准确率最高,比基于单一表情特征的在线课堂专注度识别准确率高出5.0%,比基于单一头部姿态特征的在线课堂专注度识别准确率高出9.2%。图[39]表[22]参[108]
其他文献
近年来,我国城市轨道交通处于大规模的建设和发展阶段,能源消耗总量巨大。因此,探索有效的节能方法,降低能耗,已成为学者们广泛关注的热点问题。列车ATO速度曲线和计划运营时刻表是影响列车牵引能耗的两个主要因素,研究列车速度曲线与时刻表一体化节能的方案,具有重要的理论意义和应用价值。本文在分析列车电气牵引、ATO系统及运行线路特征的基础上,建立了列车多质点动力学模型和牵引仿真计算模型,实现了列车运行过程
学位
随着经济的飞速发展,我国公路总里程达到了519.8万公里,位居世界前列。但是公路的安全保障仍存在很多问题,尤其是受时间、自然灾害、车辆超重等因素造成的路面裂缝,如果没有及时发现和妥善处理,那么公路使用寿命会受到非常严重的影响。目前公路路面的裂缝检测在实践中主要依赖相关技术人员在现场的目视观测,该方法所需人工成本高,危险系数大且检测效率较低,同时具有主观性。因此,如何快速的获取公路的沥青路面裂缝信息
学位
现阶段充电桩服务企业仍然采用传统的技术手段处理充电中产生的海量数据,这导致数据利用不充分、数据无法长期存储等问题出现。基于此,本文提出一种基于BP神经网络的充电桩负荷预测模型,并利用大数据分析技术对充电桩数据平台进行设计,以实现数据的长期存储和数据潜在信息的充分挖掘。主要研究内容由以下几方面组成:首先,对充电桩数据分析平台相关理论技术进行分析,具体包括大数据存储技术、分布式计算技术以及本文负荷预测
学位
VIENNA整流器因其输出电流正弦、功率密度高等优点而广泛应用于中高压大功率系统中,但由于三相负载分布不均衡等因素造成的电网电压不平衡,导致VIENNA整流器中功率耦合的问题更加复杂,而且在机车牵引、船舶推动等大功率应用场合中,需要降低功率器件的开关频率,加剧了整流器的功率耦合问题。本文针对电网电压不平衡时低开关频率下的功率耦合问题,提出了基于解耦的电流控制方法,改善了系统的动态性能。本文建立了电
学位
随着社会的高速发展,社会中发生的事件越来越复杂,暴力事件随时都可能发生。因此在视频监控中快速识别暴力行为,对社会的稳定,人们的生命和财产安全有着至关重要的意义。然而很多视频监控只具有实时预览和存储的功能,不能实时识别视频中暴力行为,需要通过工作人员监视监控画面方式来对视频中发生的事件进行判断,导致人力资源过分浪费。视频暴力行为识别指的是及时有效地发现视频中是否存在的暴力行为。随着社会的发展,社会的
学位
目前水资源紧缺问题日趋严重,全球大约有36亿人口居住在缺水的地区。然而水资源在分配利用过程中漏损严重,平均有35%的水资源在分配利用过程中流失,仅我国每年的漏损量已近百亿吨。这不仅导致了大量水资源被无端浪费,也造成了巨大的经济损失,而且影响居民的正常生活用水需求。同时管道泄漏点也是潜在的污染物侵入点,容易污染饮用水,可能会危害居民的生命安全。因此,快速而准确地定位泄漏位置对于节约水资源和保障居民用
学位
近年来,随着三维点云数据处理算法的不断发展,点云分割逐渐成为研究热点。三维点云数据相较于二维图像包含了更多的空间结构信息和几何特征信息,可以体现出物体在空间中的真实存在形态,更容易解析其空间结构,实现场景语义化。而要想能够正确实现场景语义化,需进行语义分割操作,将三维空间内不同对象分割出来,为后续三维点云数据处理打下基础。对点云分割算法进行优化并提高算法效率,是点云分割领域的重要研究课题。本文以传
学位
学位
军用无线传感网络可以有效地感知战场态势,对战场情况进行侦察和监视,使作战单位占据情报先机。但其能量供应问题严重制约了该技术的发展和应用,更换节点电池会导致传感器停止工作且受战场恶劣环境所限难以实现。无线电能传输(Wireless Power Transfer,WPT)技术为解决此问题提供了新的思路,但由于传感器节点体积小造成的收发线圈尺寸差异会导致发射线圈电流过大的问题。针对该问题,本文提出在发射
学位
CRAFT(Comprehensive Research Facility for Fusion Technology,聚变堆主机关键系统综合研究设施)是“十三五”规划中部署建设的核聚变大科学装置,装置的主要建设内容为超导磁体研究系统和偏滤器研究系统,其中超导磁体研究系统需要配置一套大功率磁体电源从而保证其稳定测试。本文从优化CRAFT Toroidal Field(TF)纵场磁体电源变流器过电压
学位