视觉特征融合的注意力检测技术及其在线上教学的研究

来源 :杭州电子科技大学 | 被引量 : 0次 | 上传用户:hongwei3330857
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网技术的发展、应用的快速普及,不受时空限制的线上教学风起云涌,特别是受新冠疫情的影响,人们对于无接触式的线上教学的需求变得更加迫切。线上教学打破了时间空间限制,使人们的学习更加自由便捷。但相比于传统课堂,在线课堂环境下师生互动性差,沟通存在一定障碍,教师很难有效监测到学生的学习专注度,学生也可能会因为没有监督而学习效率下降。基于此,本文结合网络线上教学环境的特点,提出了一种视觉特征融合的注意力检测方法,来缓解上面说到的痛点问题,其中包含了无人检测、头部偏转检测、人眼闭合检测以及视线估计检测等注意力检测相关技术,并设计开发了注意力检测系统,主要内容包括:(1)提出了一种基于snakuscule的虹膜中心定位算法。为了提高自然光下采集到的低分辨率人脸图像的虹膜中心定位精度,针对snakuscule能量模型做出了改进,提出了跳跃迭代模型,并结合单像素迭代、跳跃迭代以及虹膜在内圆的占比设计了自适应迭代策略,且将迭代活动增加到了10种,兼顾了实时性和准确性。接着,又加入了虹膜质检环节以改善检测错误的情况,提高定位精度。对比实际检测结果,验证了所提算法的优越性和准确性。(2)为了提高人脸在不同姿态下的视线估计精度,提出了针对不同姿态的视线估计算法。将两种人眼ROI分割方法分别进行建模分析,给出了针对性方案来应对人脸端正、人脸倾斜以及人脸偏转三种姿态下的视线估计,其中引入了虹膜中心补偿算法和主眼策略,旨在减小头部偏转对视线的影响。最后以此算法为基准开展了实验,实验结果验证了此方案的有效性和准确性。(3)综合多种注意力相关特征,设计开发了融合多特征的注意力检测系统。文章中结合了多种视觉特征,设计开发了4种注意力检测模块,包括无人检测、头部偏转检测、人眼闭合检测以及视线偏离检测,该系统分为学生端和教师端,学生端系统可将注意力检测结果传送给教师端,教师通过教师端系统可以实时关注所有在线学生的学习状态。本文中的实验方法对比了单一视觉特征与多重视觉特征融合的注意力检测准确率,实验结果显示本文实现的检测系统能够准确完成注意力检测任务,从而实现了提升学习者的学习效率,提高教学质量的目的。
其他文献
目前,随着5G物联网(Io T)技术的快速发展,作为其关键技术的无线传感器网络(WSN)研究受到广泛关注。对于诸多WSN应用场景,降低系统能耗和提高信号传输可靠性是首要问题。为此,本文主要开展了针对WSN的多中继编码选择译码转发(SDF)协作技术研究。首先,提出了协作通信多中继节点SDF及对应的功率分配方法,以降低中断几率。随后,提出了结合极化码编码技术得SDF中继通信方法,以提高信号传输可靠性。
煤炭在能源领域充当着重要的角色,我国每年煤炭消费巨大,煤炭的高效利用对我国的社会经济发展和改善民生有重要价值。现阶段火电厂主要以燃烧煤粉作为发电方式,优化制粉系统变得至关重要。然而制粉系统内部运行状态难以做准确地实时监测,利用火力发电厂制粉系统的可操作参数和煤质参数来建立制粉系统煤粉细度和磨煤机电流大小的预测模型就成为了一种可行的方法。本文以HP983型磨煤机作为研究对象,在河南平顶山某电厂的#5
电子战(EW)也称为电子对抗,是敌对双方争夺战场电磁频谱的斗争,电子对抗技术是当代信息化战场上十分关键的作战力量之一。其中,电子侦察中的检测与估计技术是电子战成功实施电子攻击和防护的首要任务和先决条件。然而,随着军事电子信息技术的快速发展,战场电磁频谱呈现动态、多变、密集、复杂等特征,给传统的检测与估计方法带来了前所未有的挑战。与此同时,深度学习技术快速发展,其相关技术在电子对抗中的应用也成为了当
无论是在家庭还是学校,每天都发生着许许多多的小事,一个眼神、一句话语、一个手势等都可能对孩子产生莫大的影响。教育现象学就是一门探讨成年人与孩子如何相处的学问,回答“对于这个孩子,此时此刻我该怎么做才是最好的”。然而,所谓此时此刻的正确反应往往不是周密思考的结果,而是取决于教师感知学生的敏感性。教育不是教知识,
期刊
路径寻优是一种较为经典的优化问题,其主要内容是通过智能优化算法合理规划出一条从起始地到目标地的最优路径。群智能优化算法(Swarm Intelligence,SI)是一种新兴的元启发式技术,具有原理简单、易实现等特点。近年来,出现了许多新颖的SI算法,例如哈里斯鹰优化算法(Harris Hawks Optimization,HHO)。HHO算法是受哈里斯鹰捕食行为启发而提出的一种新的SI算法,具有
由于信号中的信息存在一定的冗余,假使根据奈奎斯特采样率对信号进行采样,会造成带宽不可避免的“浪费”,同时还可能增加信号采集、处理方面的设备成本。而假设信号存在一定稀疏性的情况下,根据压缩感知理论,信号可以先经过一定的测量过程而实现压缩。测量过程中,信号的采样率可以远低于其奈奎斯特采样率。因此可以说压缩感知一定程度上“突破”了奈奎斯特采样定律对模数转换的限制,针对通信领域中载波频率不断提高的现状,压
大规模多输入多输出(Massive Multiple-Input Multiple-Output,Massive MIMO)自问世以来,以其分集增益和空间增益特性,被广泛应用在网络需求大的场景中。随着技术的变革,通信设备数目快速增长,基站集成的天线数量也随之增加,这就导致了整个系统的功耗巨大。因此,如何降低系统功耗,发展绿色通信已经成为当今研究的热点。在此背景下,本文针对大规模MIMO系统的能效优
逆向调制(MRR)自由空间光通信(FSO)系统是一种基于逆向反射器的非对称FSO系统,既避免了传统无线射频通信系统面临的频谱资源紧张、传输速率及安全保密性不够高的问题,又能克服传统FSO系统终端功耗大、体积大的缺点。然而,MRR FSO通信需要在大气信道中进行往返两次传输,会受到两倍大气湍流的影响,带来更加严重的光束漂移及光强闪烁等光学畸变现象,从而降低系统的稳定性和可靠性。因此,为了进一步提高M
基于世卫组织给予的数据中,每年交通事故发生的次数不尽其数。其中,疲劳驾驶是其中一大致命因素。在2005年的中国交通事故统计报告提到的47起事故中,因疲劳驾驶导致7起。疲劳驾驶不仅是在伤害自己同时也在伤害他人。为了尽可能地避免疲劳驾驶的事故发生,疲劳驾驶状态检测极其重要。对此,研究疲劳驾驶状态检测具有深刻意义与举足轻重的价值。为了在驾驶过程中能够有效地进行实时检测,本文基于MobileNet-V3轻
为了进一步提升电机驱动系统的功率密度与效率,降低系统的体积与成本,电机与驱动电路的集成化技术逐渐成为研究人员的关注热点。磁功能集成电机驱动的概念指电机与驱动电路共享磁性元件实现各自运行所需的不同功能,从而为系统减少磁性元件的数量。然而磁功能集成电机驱动方案中电机和驱动电路同时包含功率耦合和磁耦合,无法用传统思路独立设计。确定电机励磁绕组参数是解决这一问题的关键。针对此问题,本文提出一种将驱动电路设