【摘 要】
:
随着人类对眼睛和注视运动的深入研究,借助日益先进的计算机技术和人工智能技术,视线跟踪技术得以稳步发展,且已经被成功运用到诸多领域。然而视线跟踪技术仍存在许多问题:苛刻的交互方式导致用户体验差,跟踪的实时性、鲁棒性和精度仍不能满足实际应用场景。本文调研和分析了现有视线跟踪系统存在的挑战因素,选用瞳孔角膜反射法和基于3D眼球模型的方法实现桌面式视线跟踪系统。为了提高系统的性能,本文研究并实现了瞳孔定位
论文部分内容阅读
随着人类对眼睛和注视运动的深入研究,借助日益先进的计算机技术和人工智能技术,视线跟踪技术得以稳步发展,且已经被成功运用到诸多领域。然而视线跟踪技术仍存在许多问题:苛刻的交互方式导致用户体验差,跟踪的实时性、鲁棒性和精度仍不能满足实际应用场景。本文调研和分析了现有视线跟踪系统存在的挑战因素,选用瞳孔角膜反射法和基于3D眼球模型的方法实现桌面式视线跟踪系统。为了提高系统的性能,本文研究并实现了瞳孔定位算法、光斑检测算法和瞳孔检测算法。瞳孔定位算法将传统算法和深度学习结合,利用瞳孔区域的灰度特性做图像的初步处理,并记录候选区域,通过分类器识别瞳孔区域;光斑检测算法利用图像处理算法做瞳孔区域的阈值分割,并结合光源发射器的位置特性求解光斑中心;瞳孔检测算法先采用Inpainting算法排除光斑等因素的干扰,然后利用形态学算子和椭圆拟合等技术求解瞳孔中心。采用基于目标检测的方法进行瞳孔定位和基于暗瞳的方法进行瞳孔检测,能够实现高精度、高鲁棒性的实时视线跟踪。本文建立了实验数据集,收集了18个测试人员的图像数据,光照变化、头部姿势、运动模糊等实际情况,通过标注每帧图像的瞳孔中心和光斑中心验证了注视特征检测过程中三个算法的性能。结果表明,瞳孔定位算法的精度为97.89%(分类器的精度为99.94%),光斑检测算法的精度为98.7%,瞳孔检测算法的精度为98.94%。本文实现了实时的视线跟踪系统,并给出了系统的硬件架构和软件架构。系统的硬件主要完成数据采集工作,由红外光源发射器、CMOS图像传感器、FPGA数据处理板和USB3.0传输板组成。另外,基于QT框架和Opencv算法库实现了软件模块(包含算法模块),完成界面交互和算法处理,实现跨平台开发,具有可移植性。本系统由四个连续的过程组成:1)硬件设备采集图像数据。传感器捕获暗瞳图像后,利用FPGA做数据处理,通过USB3.0传输给软件模块。2)注视特征检测过程对图像数据进行处理,求解瞳孔中心和光斑中心。3)视线估计求解光轴向量。用Matlab软件内置的标定算法进行相机标定,求解相机的内外参数。采用单相机双光源的系统原理求解光轴向量的两个参数:角膜曲率中心C和瞳孔中心P。4)偏差校准求解注视点坐标。光轴向量和视轴向量存在一定的偏差角,本文研究了基于四点标定算法的注视点均值法和精度误差法,准确的求解注视点坐标。通过真实的测试环境评估了系统的整体性能。系统的帧率为54fps,精度为0.67~o,并且抗干扰能力强,鲁棒性好,可在实际的应用场景中发挥作用。
其他文献
【正】 今年一月份,我们去唐山柏各庄综合化工厂开门办学。一进厂,就受到厂领导、工人师傅热情欢迎,并提出了很多希望,希望我们帮助改进谷维素生产工艺。他们诚恳地说:“多年
【正】 为尽快改变我校干部(含教师,下同)队伍年龄结构状况,形成合理的适应社会主义现代化教育需要的新型梯队,我们对我校干部队伍的年龄结构状况进行了考察,并提出了若干调
宋代安徽地处江南,经济文化都比较繁荣,此时诗社亦有不少。这些诗社主要分布于徽州及宁国府,其中徽州诗社最多。安徽诗社已呈现一定开放性,但多由官员组成。
【正】 价值规律作为商品经济的普遍规律,就这一点来说,在经济理论界是不存在什么争议的。但是对于价值规律在商品经济中的作用以及表现形式问题,仍然存在着各种不同的观点。
目的探索利用磁导航技术辅助冠脉介入操作以减少对比剂用量。方法冠脉造影至少有1支血管病变需要支架治疗的病人31例(男24例),平均年龄(66.7±10.6)岁。分为3组,常规技术组、
摘要:新形势要求高职院校旅游管理专业应根据市场的动向而不断调整教学体系,结合旅游管理相关教学过程中实际规律,进一步加强教学体系的建设与实践,进而实现教学目标,使得培养的人才能够保证相关旅游企业对专业人才的需求。本文对我国相关旅游专业高职院校在实际教学过程中存在主要问题进行探讨,并针对性地提出了相关的解决方案。 关键词:高职院校;旅游管理专业;实践教学;建设与实践 中图分类号:G712 文献标志
随着我国城镇化和现代化建设的不断推进,为城市各项基础设施的运行提供能源供应的电力系统愈发重要,作为其重要节点的变电站,一旦失效或遭到破坏,将会造成电力系统停运,并产生巨大的灾害和经济损失。在我国,地震是最具破坏力的突发性灾害之一,其对变电站造成严重破坏的潜在风险极高。本文依托陕西省重点研发计划项目,基于国家科技支撑计划课题的研究成果,对适用于我国的变电站地震易损性分析与经济损失评估方法及模型进行了
生活中我们离不开光,在阳光的照耀下,绘画者透过眼睛观察到不一样的颜色。同一事物,在早晨与傍晚阳光的照射下所呈现出来的色彩是完全不同的,每个艺术家对它们的诠释也有所不
目前,世界谷物库存量低,价格上涨,这将影响1996年全球谷物供应及化肥消费状况。预测1996年全球化肥消费量将有所增加。全球化肥消费量主
注意力被认为是儿童在学习过程中最重要的能力之一。儿童的注意力对今后数学能力与流体智力的影响至今依然值得关注。近年来注意力训练的研究逐渐增多,许多研究考察了注意力对其他认知能力的迁移作用,尤其是注意力训练对改善数学能力和流体智力的效果,但相关的研究结果仍有争议。本论文包括两个研究。研究一主要考察了儿童注意力的发展以及注意力与数学能力、流体智力之间的关系。以上海某小学64名7~8岁儿童为研究对象,对所