基于卷积神经网络的课堂人体行为识别研究

来源 :太原理工大学 | 被引量 : 0次 | 上传用户:xxxmcu1
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
课堂教育是学校教育的重要环节,如何提高课堂教育质量一直是学校教育的重要研究内容。近几年来,随着计算机技术、计算机视觉技术的快速发展,课堂智能化也成为课堂教育发展的重点方向。课堂人体行为识别的研究是课堂智能化的一个关键领域,课堂中学生行为反映了教师与学生的互动程度、学生上课的积极性以及教师授课能力。了解并分析学生课堂上的行为活动,有利于了解学生上课时的状态,从而针对性的改进教学方式,提高教学质量。因此,课堂人体行为识别研究是一项有意义而且具有挑战性的课题。
  虽然人体行为识别已经有了较为深入的研究,但在教室场景下的人体行为识别研究还处于发展阶段。本文研究了基于卷积神经网络的课堂学生起立、举手等行为,论文的主要工作如下:
  (1)构建了一个用于课堂起立的数据集。数据集的原始数据来源于网络资源与真实教室录制。数据集根据教室学生人数的不同,分为大、中、小三种规模的教室场景,每种人数规模的教室都包含不同的光源条件。构建的数据集将用于识别学生起立模型的训练及测试。
  (2)基于人脸识别的学生身份验证。将卷积神经网络应用于课堂人脸识别中,针对人脸相似的特点,改进了VGG-16(Visual Geometry Group)的损失函数,减少类内距离,增大类间距离。改进的VGG-16网络提高了人脸识别准确率,在Labeled Faces in the Wild(LFW)数据集上的精确率较经典VGG-16提升了2.4%,对发生起立行为的课堂学生身份能够进行有效验证。
  (3)基于骨骼关键点的课堂举手行为识别。针对课堂学生举手的多样性,采用了人体骨骼关键点检测的方法,对课堂学生举手的行为进行判定。首先通过OpenPose模型检测课堂学生的骨骼关键点,利用检测出的关键点坐标信息及连接信息,对学生的手臂姿态进行分析,最终达到识别学生举手行为的目的。
  (4)基于改进SSD(Single Shot MultiBox Detector)的课堂起立行为识别。由于课堂学生上课时为坐姿状态,因此,通过识别学生站立状态判定学生的起立行为。改进了SSD算法的基础网络结构,加深网络层数,增强了网络特征提取能力。针对课堂正负样本不均衡的问题,改进了损失函数。改进的SSD算法在自建数据集上准确率达到86.7%,检测速度为33fps(Frames Per Second),符合实时性要求。
其他文献
产业转型的时代背景下,创意迎来黄金发展期。行业的发展带动了创意办公建筑的兴起,现阶段,国内的大批创新企业诞生,产生了相应的建设需求。然而,由于从事创意产业的员工具有区别于一般办公人员的行为特征,因此,契合行为进行创意办公建筑的设计研究十分关键。现阶段,从行为出发进行的创意空间直至总体的研究比较匮乏。本文从行为模式出发,对行为模式、设计理念、设计手法三者进行分别解析,运用模型分析、统计分析等方法进行
学位
随着高校新校区建设大潮逐渐降温,高校既有校园建筑日益体现出重要的资源价值。这些既有校园建筑承载着校园历史和文化的印记,具有较高的文化价值和再利用价值。然而,当前高校既有建筑也存在一些不容忽视的问题,例如空间布局难以满足现有功能需求,使用舒适性差等。在此背景下,本文将针对高校既有校园建筑进行研究,探讨提升建筑空间对于当前多元化需求以及未来需求变化适应性的长效优化设计策略,以期实现高校既有校园资源的空
根据部分可观测信息反演传热系统的内部特征或热边界条件,构成了传热学反问题(inverse heat transfer problem, IHTP)。传热学反问题广泛存在于科学研究和众多技术领域。近十几年来,传热学反问题及其应用研究十分活跃,对于线性非时变传热反问题,已经建立了一些相对成熟的研究方法。另一方面,实际工程领域的许多传热问题都具有明显的时变不确定性和非线性等基本特征,现有的传热学反问题研
Copolymerization refers to the chemical reactions or methods by which a copolymer can be synthesized. A copolymer is a polymer derived from two or more nonnumeric species. It is also known as a hetero
学位
网络化系统的优点是共享通信网络、操作灵活、成本较低,同时,也存在许多问题,比如时延、丢包,量化等。目前,关于上述问题已经取得了很多研究成果,而具体通信协议下的网络控制问题研究仍然具有重要的意义。由于通过共享网络实现数据通信,网络化系统中的网络堵塞、数据覆盖等原因,导致丢包问题广泛存在。针对丢包的网络控制系统研究,吸引了广大学者的兴趣。已有的研究中,鲁棒预测控制方法在假设丢包上界的前提下,得到了较为
配网带电作业是提高供电可靠性、减少停电损失和保证电网安全的一种重要作业方式。目前,我国带电作业仍以人工带电作业为主,研制带电作业机器人取代部分人工带电作业能够使操作人员远离危险作业环境,成为智能电网现代化发展的新趋势。  在配电网带电作业中,搭接引流线作业是其重要组成部分。目前,带电作业机器人完成搭接引流线作业过程中,由于其机械结构限制及环境干扰,高空作业平台在机械臂运动过程中存在无规律晃动,机械
在煤矿深部开采过程中,矿压显现明显,为确保准备巷道可以安全的进行施工,就需要留设大煤柱来减小矿压影响,但这不仅造成了煤炭资源的浪费,并且会导致一系列的动力灾害事故。故而,深入研究小煤柱沿空掘巷开采技术对于深部矿井安全高效的开采具有十分重要的理论及现实意义。论文采用的方法有:理论分析、现场实测、数值计算分析、物理相似材料模拟实验等,对小煤柱沿空掘巷稳定性分析及控制技术进行了系统研究,得出以下主要结论
学位
在提倡文化自信的时代背景下,校园建筑设计开始关注于对建筑地域性表达的探索。建筑的地域性表达不仅仅影响建筑的形式和风格,建筑的地域性有着多元的视角,要求建筑在传承文脉的同时兼具对绿色生态、舒适高效和人文关怀的设计关注。从而要求建筑师从地理气候、社会经济、文化历史、生态人文等方面多维度的对建筑的设计进行综合性的思考。本篇论文基于对一个校园实际工程的分析,对校园设计的各层面的共性问题进行地域性的思考和研
学位
村落是由一定规模的从事农业相关的人群,在特定地域范围内集中居住、活动的现象、过程与形态。村落的发展历程伴随其形态的生长与演变,其本质是村落内部建筑单体的集聚及与其他要素融合的过程,最终呈现为边界与空间结构形态。基于建筑对村落边界生长、界定的重要影响,论文主要就村落建筑平面轮廓入手,从图形视角出发探究村落二维边界的界定原理、数据库构建、类型识别及其驱动因子相关性规律。  首先,论文规定那些仅受建筑单
学位
激光二极管(LD)泵浦的固体激光器具有高稳定性,高效率,高能量的优点,被广泛应用于军事、工业、医学和科学研究等领域,已成为国内外激光器领域研究的热点。Nd:GdVO晶体是一种与Nd:YVO晶体同晶型的Nd基质晶体,除具有Nd:YVO晶体的优点(发射截面大、吸收系数大、输出为线偏振等)之外,它在方向具有高的热导率(11.7WmK),高于Nd:YVO晶体(5.4WmK)及Nd:YAG晶体(11.1wm
学位