基于双目立体视觉的自由空间视线跟踪方法研究

来源 :天津大学 | 被引量 : 0次 | 上传用户:mimidong
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视线跟踪技术是智能眼动操作系统的关键技术,是实现先进眼动操作系统作为高级人机交互应用的基础和前提。视线跟踪技术发展初期,采用的跟踪方法对人干扰较大。近年来随着机器视觉和图像处理技术的发展,利用视觉方法记录眼动并采用图像处理方法分析视线方向的非接触式视线跟踪技术得到广泛应用。本文阐述了非接触式视线跟踪技术的发展历程,介绍了现有的实现视线或注视点实时动态跟踪的非接触视线跟踪技术,包括2D视线跟踪方法、3D视线跟踪方法和基于3D模型的视线跟踪方法。指出2D视线跟踪技术强烈依赖标定映射平面,且只能得到二维视点信息;3D视线跟踪技术头部自由运动和高精度眼睛图像跟踪无法兼顾,且空间标定过程繁琐复杂。针对目前存在的问题,提出采用基于双目立体视觉的自由空间视线跟踪新方法。该方法基于双目立体视觉测量模型,融合极线几何约束,获得精确的瞳孔中心及瞳孔所在平面的空间姿态,并定义“单只眼睛的瞳孔边缘所构成的圆平面中心点法线方向”为视线方向,该定义与通常的瞳孔角膜反射法不同,具有更严格的三维表达。首先,基于双目立体视觉的自由空间视线跟踪模型构建自由空间视线跟踪实验装置,包括双目相机和取景相机的选型及半透半反镜和头罩基体的制作,其设计满足人类工效学原理。其次,基于双目立体视觉的自由空间视线跟踪模型的实现,即定义的视线方向的跟踪。视线方向跟踪部分主要包括双目相机标定、瞳孔边缘点匹配及瞳孔所在圆平面空间姿态计算等过程。瞳孔边缘点匹配基于极线约束匹配技术,分别采用基于相机投影矩阵和SURF+RANSAC图像匹配点方法计算基础矩阵,从而进行瞳孔边缘点的同名点对匹配,实验得出二者匹配效果皆很好,基于投影矩阵的方法速度更快。本文所提出的基于双目立体视觉的自由空间视线跟踪方法,可解决现有三维方法中存在头部自由运动与高精度眼睛图像跟踪无法兼顾及空间标定过程复杂的问题,同时可以获得三维的视线方向。
其他文献
新课改环境下的英语预习能够充分发挥学生的主观能动性,实现独立学习、主动学习. 在培养了学生的自学能力的同时,也培养了学生的问题意识,使其带着在预习过程中发现的问题投
该文结合山东荷泽发电厂和山东海化集团热电厂的具体项目,根据风粉在线系统与DCS系统不同的连接方法,对风粉在线系统的各种工程应用方案进行了分析.在此基础上针对系统进一步
在国内已有的产品中,虽然名义上是便携式,但从实际使用的情况看,一直需要有一台电脑相连,在测试过程中作为数据存储和计算的载体;另外,产品软硬件设计不合理,使用者受到诸多
本文参照ISO(the International Organization for Standardization)系列激光束测试标准,结合半导体激光器光束的特点,确立以光束宽度、光束发散角、光束空域传输方程的拟合,
该文利用数字图像识别和处理技术,提出了基于数码成像和图像处理的粒子尺寸测量和统计方法.利用微控制器和数字图像传感器构建了实验粒子检测系统,为利用数字图像处理技术实
振动在自然界中普遍存在。但振动通常对结构是有害的,因此,对振动进行控制具有重要意义。但振动控制中的主动控制系统体积庞大、且耗能多等,而被动控制环境适应能力比较差,因而,半主动控制在很多场合成为首选方案。本文将压电半主动控制与压电能量收集技术相结合,在有效控制振动的同时,还可以实现能量收集。论文首先结合压电材料的机电耦合特性,对非线性同步开关阻尼(SSD)的半主动控制系统建立了理论模型。在此基础上分
众所周知,石油是国民经济建设和人类生活中不可缺少的一种重要矿物能源。石油工业作为国民经济中的支柱产业,具有举足轻重的作用。原油的开采和生产是石油工业中一个重要环节。
拖曳水池中非规则长峰波的试验模拟质量将直接影响到船舶和海洋结构物耐波性试验研究的准确性。本文针对上海交通大学船模拖曳水池的造波系统,通过数值模拟分析和试验分析的
太阳能帆板是航天器的主要供能系统,航天器从发射到入轨,太阳能帆板经历由折叠到展开的两个阶段。本文研究一种应用于空间展开机构的SMA驱动器。以太阳能帆板展开机构为例,设
深度图像的匹配和合成是三维数字成像及造型技术中两个关键技术.论文的核心内容是围绕深度图像理解中的关键技术进行系统的研究,主要工作包括以下几个方面:1.基于光学相位映