基于自注意力机制的学生专注度识别方法及系统实现

来源 :华中师范大学 | 被引量 : 0次 | 上传用户:jaslxj
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着教育改革的不断推进,教学评价改革也受到了越来越多的关注。传统的教学评价往往以教学成果作为主要的评判依据。然而对于教学评价而言,教学过程评价应当与教学成果评价同等重要。学生在课堂中的专注度可视为是注意力集中程度、学习参与状况等的综合体现。因此学生课堂的专注度可为教学过程评价提供数据支撑,对教学评价改革具有十分重要的意义。现有的学生专注度识别法可分为手动识别和自动识别。手动识别耗时费力,且结果的有效性受许多不可控因素影响。在自动识别法中,基于视频的识别法相较于基于日志或传感器方法具有适用范围广、学生学习过程不被影响等优点。因此本文采用基于视频的识别方式。然而现有的基于视频的识别模型存在模型参数多、长距离特征捕获能力差、无法并行计算、运行效率低等问题,并且多数模型没有同时采用局部和整体的特征。针对数据而言,学生专注度识别领域相关的数据集比较缺乏,数据集中包含的数据量较少。并且在教室场景中,容易出现学生被遮挡的问题。最后关于学生专注度识别系统的研究较少,且系统往往仅针对一名学生进行识别,并没有针对教室场景的整体的解决方案。为了应对以上的问题,本研究主要完成了以下工作:(1)设计了一套数据增强的方法,通过模拟目标被遮挡的情景丰富数据集的分布,并且在抽帧时增加随机性,使每次视频抽帧结果不完全相同,从而增大数据量。设计了一种特征提取模型,修改了 ResNet中的bottleneck,使其具备多尺度特征提取能力。修改了原始的自注意力机制模块,在位置编码中增加了时间维度信息。(2)融合了上述的数据增强模块、特征提取模型以及自注意力机制模块,提出了一种学生专注度识别模型。使模型具备了并行计算能力,克服了长距离特征间的依赖问题,使识别结果中包含了多尺度信息。模型在DAiSEE数据集上达到了 60.03%分类准确率,高于benchmark,与主流识别模型效果相当。(3)整合了目标检测、人脸识别、专注度识别等算法,设计并开发了一套学生课堂专注度识别系统。该系统可对教室中所有人员的专注度状态进行实时监测,并提供简要的数据统计。其功能和性能均通过测试,实现了设计目标。
其他文献
信息资源已经成为各个行业当之无愧的战略资源,数据资源也已经成为真正意义上的互联网行业的“石油”资源。然而随着信息量的日益增长以及数据库在各行各业中的广泛应用,当下人们需要一种更为直接,高效,灵活的数据库检索方式,其中基于自然语言接口的数据库问答系统成为了该问题的“有效解”。NL2SQL作为一种面向关系型数据库的问答技术,在最近几年里随着WikiSQL,Spider,CSpider,DuSQL等Te
学位
少年儿童是祖国未来的希望,阅读对少年儿童的发展起着重要的作用。随着社会经济和人民生活水平的提高,少年儿童的阅读教育受到社会广泛的重视。注重对不同年龄段少年儿童的阅读能力发展以及身心的健康成长,成为国家重点关注的话题。在这一背景下,分级阅读作为世界性的阅读趋势,引起了人们的关注。少年儿童图书馆作为公共图书馆,有着丰富的儿童馆藏以及优良的阅读环境,向少年儿童提供阅读服务时存在诸多优势,是儿童阅读推广的
学位
面部表情在人们的日常交往中有着重要的作用,它直接传递了人们的情感。随着计算机科学技术的发展,自动化人脸表情分析成了一项受到越来越多关注的研究课题。面部表情分析也在人机交互和情感计算领域有着丰富的应用场景,如智能教育、医疗监控、数字营销、犯罪侦察等。通常来说,面部表情分析包括人脸表情识别和表情强度估计两项任务。现如今的人脸表情研究大多只关注于表情识别,即将表情识别为高兴、愤怒、恐惧、悲伤、惊讶、厌恶
学位
图像人脸替换,即把目标图像中的人脸替换为源图像中的人脸,而保持目标图像中人脸的面部表情和头部姿态等信息不变的过程。图像换脸可以被应用到许多领域,比如影视、商业、隐私保护、儿童孤独症治疗。随着深度学习和计算机视觉领域的发展,图像人脸替换已经取得了相当程度上的进展。但是当前方法仍然存在图像纹理处理的不够好、训练过程不稳定、训练要求高等问题。针对这些问题,本论文提出了一种基于生成对抗网络的图像换脸算法,
学位
城市书房是一种小型实体图书馆,从温州在2014年建起第一座城市书房起,以其便捷、舒适、休闲等特点迅速风靡全国,至今已有超过150个城市建立起超过1800座城市书房。城市书房的出现,极大丰富了我国群众精神文化生活,有效推动全民阅读活动的深入。城市书房大多是由当地政府文化部门主管,市公共图书馆负责业务指导、资源支持、监督考核等工作,并积极引入社会力量参与建设。随着城市书房数量增加,其服务质量也显得愈发
学位
在经济快速发展的今天,文化发展已成为促进经济发展和实现中华民族伟大复兴的必由之路。民族古籍作为展现民族文化的重要途径,对其进行必要的保护、研究具有重要意义。云南省是我国世居少数民族种类最多的省份,民族文化资源丰富,历史长河中形成的民族古籍亦是汗牛充栋。但近年来,民族古籍保护形势却不容乐观,每年有大量的古籍与古籍传承人在消失,为了保护民族文化,急需改善这种情形。随着近年来数字化技术的发展,民族古籍数
学位
自新冠疫情爆发之后,学生及教师们响应“停课不停学”的号召,均开始采用线上线下相结合的方式来进行教学,线上教学的重要程度显得愈发强烈。线上教学相比传统的教学方式有着一些明显的优点,如不受时间与空间的约束、教学资源可反复观看学习、可快速收集学习者学习数据等,但在在线教学的场景之中,教师却无法及时判断学习者的学习情况,从而动态调整自己的教学计划,实现因材施教与个性化教学的目标,但值得庆幸的是,随着人工智
学位
图书馆员是我国公共图书馆组成的核心部分,是图书馆业务开展的实施者和指导者。馆员的职业认同度对图书馆的发展至关重要。为了客观把握我国图书馆员职业认同的现状,探析馆员职业认同的深层原因以及职业认同与职业发展之间的联系,本研究结合社会认同理论、综合激励理论,对我国公共图书馆员职业认同展开翔实的研究。本文在文献综述的基础上,构建公共图书馆员职业认同结构模型,编制《我国公共图书馆员职业认同》调查问卷,对我国
学位
面部表情识别对于机器解析人的状态和行为至关重要,在机器人研发、心理营销学、人机交互、教育、安全等诸多领域中有难以替代的应用价值。虽然自然场景下的面部表情识别依靠深度学习模型强大的对于海量数据的学习和表示能力取得了长足进步。但是,在收集大规模面部表情数据集时,不可避免地会产生一些来自图像数据本身、错误标签或表情固有混淆性的噪声,并导致模型退化。为了缓解这个问题,本文研究了基于标签置信估计和多网络联合
学位
卫生监督是中国卫生健康系统的重要组成部分,其成立的宗旨在于在保障卫生健康领域相关工作的合法性和安全性,促进人民健康可持续发展和全国经济社会的快速发展。自2019年以来,全国各地机构改革不断深入,监督范围、专业急剧扩大,卫生监督面临着新的要求和更大的挑战,然而在卫生监督中依然存在一些迫切需要解决的问题,如卫生监督体制机制仍待完善、资金支撑乏力、卫生监督资源分布不合理等。在本篇论文中,将通过发放问卷,
学位