基于眼特征的视觉注意力检测方法研究

来源 :沈阳工业大学 | 被引量 : 0次 | 上传用户:HalfHour
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
眼睛是获取外界信息的重要器官之一,采用计算机视觉方法对人眼注视方向进行检测,能够令机器更好地观察和理解人类的行为活动。本文以在线学习为课题研究背景,研究基于眼特征的注意力检测方法,将视线估计方法与头部姿态估计方法相结合,实现人脸图像中被测者注意力状态的自动识别。针对基于人脸图像的头部姿态估计问题,采用基于EPnP的头部姿态估计方法,该方法首先在人脸图像中识别出二维人脸关键点,然后采用EPnP方法获得人脸在三维坐标系下的角度信息,实现头部姿态的估计。针对基于人脸图像的视线估计问题,采用深度学习方法,对现有的残差网络进行改进,提出一种基于预激活残差网络的视线估计方法,该方法通过将BN层以及Re LU设置在卷积层之前构建具有预激活功能的残差块,再利用三个预激活残差块设计了一个预激活残差网络。该网络将眼睛图像作为模型的输入,通过融合头部姿态信息,估计人眼视线方向。最后,融合被测者的视线估计与头部姿态估计结果,实现基于视觉方法的注意力检测,并且利用上述方法构建了一个应用于在线学习的学生注意力检测系统。为了验证本文方法的有效性和鲁棒性,评估参数选择的合理性,采用公开数据集MPIIGaze进行仿真实验和性能评估。实验结果表明,本文提出的网络模型较传统的卷积神经网络稳定性更高且其在视线估计中效果更好,其平均角度误差为4.04°,与其他方法相比,误差较小、准确度较高,并且对于低质量图片具有较好的鲁棒性。在实际测试环境中,本文方法能够实现图像中被测者头部状态和注意力的自动识别,可以满足在线学习中学生学习状态的自动检测。
其他文献
随着现代工业的迅猛发展,各种曲面工件在各领域中的应用愈加广泛,多自由度机器人凭借其灵活、高效、重复度高的优点成为与无损检测领域结合实现自动化检测的主要解决方案,多自由度机器人携带超声换能器完成自动化检测任务时,必须保证超声换能器与工件表面垂直且间距维持稳定,对机器人轨迹精密性要求较高。实际机器人因装配、加工等原因造成运动学参数不准确和轨迹规划算法问题造成机器人受到冲击等原因都会降低其轨迹精密性,以
学位
随着深度学习的快速发展,图像检测与识别技术被广泛应用于社会的各个领域,其中道路信息检测作为自动驾驶和辅助驾驶等领域的重点研究方向,对于图像检测与识别有更高的精度和速度要求,因此越来越多的研究人员选用基于深度学习的目标检测方法来进行道路信息检测。本文利用深度学习技术,以交通图像为研究对象,着重于道路信息的检测与识别,针对复杂自然环境条件下路面信息的识别效果不佳以及检测速度慢的问题,自制道路信息检测数
学位
作为元宇宙发展的载体与业务形态,VR吸引了越来越多互联网企业的关注和投资,市场热度日益升高。裸眼VR短视频以其特有的传播优势,具有率先解锁VR市场的潜力。在短视频传播平台中,快手是唯一上架全景短视频的平台。对快手平台VR短视频传播效果分析表明,传播主体、传播内容、传播模式是影响传播的基本因素;进一步实现营销团队专业化、品牌定位精准化和流量发展私域化,是优化VR短视频传播效果的基本路径。
期刊
随着机械制造业的发展,运行设备的状态监测与故障诊断对于降低维护成本、减少损失、提高系统可靠性等都具有重要意义。轴承是机械设备中使用最为频繁的零件之一,因此准确有效的使用轴承故障识别方法有助于保障在线设备的安全和稳定。传统的方法往往需要依赖人工和专家,增加了故障识别的复杂度和滞后性,不利于实现在线设备智能化故障识别与检测。所以,为了实现对滚动轴承智能故障识别检测,本文研究了基于深度残差收缩网络的轴承
学位
报纸
本文针对膏药贴的孔洞、泛黄污渍、黑色污渍进行了特征分析、检测算法设计、结果分析以及相应的算法改进。在孔洞检测中,单一的使用阈值分割法,如全局阈值分割法以及局部阈值分割法均具有局限性。本文提出了一种在方向灰度空间中基于局部灰度极值的检测算法。该算法结合了感兴趣区域提取和阈值分割两个部分,首先通过灰度分布曲线上的极值与幅值提取感兴趣区域,再使用阈值分割对感兴趣区域进行处理,达到检测孔洞的目的。其中,感
学位
报纸
随着医疗影像采集技术的不断进步,眼底图像可以实现便捷、无创地获取。因此,观察视网膜血管的结构与形态也变得非常容易。在日常生活中,电子产品的激增很可能导致人们的用眼过度,大量的眼底图像有待诊断,这会占用大量的医疗人力资源。基于计算机视觉的视网膜血管分割对辅助临床排查以及诊断具有重要的意义。由于眼底图像存在质量较差、对比度不均匀、细血管区域特征不明显等问题,本文所研究的算法着重关注细血管区域分割的完整
学位
管道运输由于其经济、高效、便捷的性质,已经作为能源的主要运输方式之一,广泛应用于石油、天然气的运输。长输油气管道敷设于复杂多变的地质环境中,不可避免的途径地震带、泥石流、冻土区域等不良地质环境。在不稳定的地质环境作用下,途径该区域的管道会产生局部位移,形成较大变形,附加应力,严重时会导致管道失效,引发重大安全事故。因此对长输油气管道的位移监测和应变测量具有重要意义。基于惯性导航技术的测绘方法,由于
学位
报纸