基于3D眼球模型的头戴式视线交互关键技术研究

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:ziquan33071033
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视线跟踪在人机交互、增强现实、人类习惯学习等领域有着重要的应用,近年来在计算机视觉领域得到了越来越多的关注。在人机交互领域而言,视线跟踪系统可分成两大类:一类基于桌面式眼动数据采集,用户不佩戴任何设备;另一类基于头戴式设备获取眼动数据,用户需要佩戴一些设备己获取状态数据。随着轻便材料和加工工艺的发展,基于头戴式的视线跟踪系统的应用将会更加普及。基于头戴式系统的研究涉及图像处理、计算机视觉领域的理论和技术。在图像处理方面,需要精确、快速地定位眼部图像中的变形瞳孔中心。在计算机视觉方面,则需要准确建立眼睛状态到显示器的空间映射关系,使得用户在标定过程和使用过程中得到更舒适的用户体验。   本文针对上述问题开展研究,主要的工作和贡献可总结为以下几点:   1.探讨和实现了一个两级的瞳孔定位方法。首先根据改进的星射线法,提取瞳孔边缘并进行椭圆拟合,在不发生眼睑遮挡时,能比较准确检测出变形瞳孔的中心。基于3D眼球模型设计了一个瞳孔遮挡检测算法,可以有效判断瞳孔是否被遮挡。当检测出瞳孔被遮挡时,进行第二级定位,采用改进的椭圆模板匹配算法,依据眼球模型参数,事先获得椭圆中心对应的长短轴比例和旋转角度,将椭圆模板匹配的计算复杂度由5维降低到3维,有效提高了匹配的效率。   2.研究和完成了一个由粗至精的快速眼角定位算法。首先提取眼部图像边缘,再利用椭圆拟合出眼角的大致区域。在内外眼角大致区域利用阈值分割出初始的内外眼角点。在内外眼角点上划定一块小区域,利用基于SUSAN算子的加权方差投影函数(SWVPF)进行眼角的精定位,实验结果验证了该算法的有效性。   3.建立了一套基于3D眼球模型的空间视觉模型,解决了标定过程存在的一点标定问题、使用过程头部自由运动产生的模型失配问题和头部运动空间测量问题。引入了一个基准坐标系,建立了一个从眼球坐标系到基准坐标系再到显示器坐标系的空间变换关系。基于场景摄像机,实时计算基准坐标系到显示器坐标系间关系;基于标定过程,训练出眼球坐标系到基准坐标系关系;从而最终计算出视线在显示器平面上的投影,即凝视点。基于该空间视觉模型,利用场景摄像机,可计算出头部的运动范围和角度。   4.设计并实现了一套视线交互的原型系统,实现了包括软键盘输入,目标跟踪和地图导航控制等应用,展现视线跟踪技术的应用前景。
其他文献
随着经济社会的不断发展和科学技术的不断进步,对电能需求在持续增长的同时,对供电质量也提出了越来越高的要求,尤其在工业自动化生产领域,电压暂降所引起的的生产中断甚至设备损
电源管理电路是所有电子产品中必不可少的模块,稳压是电源管理电路最基本和最常见的功能,低压差线性稳压器(LDO)是稳压电源管理芯片中最为常用的电路,它广泛存在于通信电子、汽车电子和一些独立SOC系统中。特别是对电源噪声敏感的模拟和射频电路,一般首选LDO作为其供电电路。随着CMOS工艺的发展,沟道尺寸和电源电压不断降低。电源电压的降低减弱了芯片对电源噪声的抗干扰能力,因此研究设计高电源纹波抑制比(P
[摘要]河北蔚县以具有独特艺术风格的剪纸艺术举世闻名,蔚縣剪纸艺术的发展曾经历过许多的坎坷,但是在当地政府和艺术家们将独具民族特色的工艺品和产业化发展相结合后,走出了一条民族手工艺发展的成功道路。研究和总结其发展的成功经验,对于其他民族手工艺术的发展具有重要的意义。  [关键词]蔚县剪纸 民族手工艺 产业化 发展 成功经验  [中图分类号]J528.1 [文献标识码]A [文章编号]1009-53
近交衰退作为一种重要的遗传学现象,在动植物中广泛存在。由近交而引起的生物适应性衰退一直是进化生物学、物种保护和育种等领域的研究重点。海洋双壳贝类由于其高繁殖力及
随着计算机、通信、控制和微电子等技术的迅猛发展,我们迫切地需要对来自不同信息源及传感器的信息进行更加有效的集成以应对不断涌现的、具有重要应用背景的各类多传感器系统
目前,我国基础教育获得了突飞猛进的发展。但是,广大农村地区,由于自然条件恶劣,经济相对落后,导致了农村初中教育相对滞后。初中语文教学是基础教育的主要学科,出现了许多不能适应
手征光纤光栅是在熔融状态下高速扭转特种光纤得到的一种新型光纤光栅,常用的特种光纤有偏芯光纤、几何型线双折射光纤以及应力型线双折射光纤。按其纤芯截面旋转对称性的不同
本文首先介绍了流水线ADC的常用性能参数和基本结构,以1.5比特位级结构为例详细的分析了ADC中的各个误差源和噪声源,最终推导出了包含非理想因素的数学模型。在这一数学模型的
血红蛋白基因能能使低氧条件下细胞的生长和蛋白质的合成速度不会受到太大的影响,并且在一定条件下还能促进目的基因的表达。本研究将透明颤菌血红蛋白基因成熟肽编码区序列分
本文通过对荣华二采区10
期刊