面向VR/AR领域的眼动追踪目标检测方法

来源 :西北大学 | 被引量 : 0次 | 上传用户:kevin_0713
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
虚拟现实(Virtual Reality,VR)和增强现实(Augmented Reality,AR)是当下全球范围的热门前沿技术,在医学研究、文化娱乐、生活服务等领域有着广泛的应用。面向VR/AR领域的目标检测,可以有效检测出周围物体的位置、类别等信息,无需后续人工识别和判断,极大减轻了后续人工进行分析和整理的工作量。但是通过现有的目标检测方法进行无差别的完全检测就会产生很多边缘信息和无关物体,使得检测结果混乱冗余,无法清晰得到用户关注的目标信息,对于分析判断用户的心理变化过程,感兴趣方向以及个性化推荐都会产生巨大困难。基于此,本文创造性地将眼动追踪技术与目标检测技术相结合,提出了两种面向VR/AR领域的眼动追踪目标检测方法。本文在以下方面进行了研究:(1)创建基于中央凹视觉区域映射的眼动追踪目标检测方法实现人眼注视区域的针对性目标检测。通过建立双通道对人眼图像和前景图像进行处理,根据人眼视觉特征确定人眼中央凹视觉区域尺寸,结合水平和垂直方向的注视跟踪方程建立映射模型,将两个通道的数据信息相互匹配,从而确定人眼在VR/AR场景中的视线区域对应于前景图像中的位置关系和物体信息,并且将光流法和感知哈希算法作为是否进行目标检测和瞳孔追踪的依据,极大的提高了系统的速率。(2)使用多步骤、多模块解决注视区域物体检测的问题时,容易造成误差的累积。因此本文又提出一种基于眼动追踪的端到端目标检测模型。该模型在YOLOv4网络的基础上改进特征融合模块,建立了CSPANet网络,利用一个多任务损失函数完成网络的训练,实现注视区域处的目标物体检测。实验结果表明,该模型平均角度误差低至0.73°,速率增长30.77%,用户体验优越度极大增强。(3)设计了基于眼动追踪的目标检测系统,并使之能够部署于VR/AR设备。
其他文献
文章从同一法律文本的概念体系、不同条文之间关系以及一个条文语言表述的逻辑性,词语的准确性、简洁性、明确性等方面对《注册会计师法修订草案》逐条进行梳理,并对其存在的立法语言规则失范和立法语言风格失范逐一分析,提出了修订理由和建议。建议《注册会计师法》以“业务”和“报告”等为基础概念,构建整部法律文本内层次分明、内在统一的概念体系;并在其最后一章专设一节以明确相关条文中专业术语的含义。《修订草案》部分
本文基于刺激反应模型(S-O-R)研究网约车乘客的出行幸福感对再出行意愿的影响,将网约车感知质量作为初始变量,将出行幸福感作为中介变量,以网约车的再出行意愿为结果变量,建立PLS-SEM,分析网约车再出行意愿的影响因素和作用路径。结果表明,感知质量对网约车再出行意愿具有显著正向影响,感知质量也通过影响出行幸福感,进而影响网约车再出行意愿。而认知满意度、出行平静情绪及出行活跃情绪对网约车再出行意愿的
内蒙古地区固废资源产量巨大种类繁多,固废污染控制与资源化利用是当地亟待解决的生态环境问题。本文以建筑垃圾、粉煤灰、赤泥等固废为原料制备陶粒,探究了陶粒最佳制备条件和酸碱改性条件;并以改性陶粒吸附废水中的Pb2+,并探究了其吸附机理。本研究提供了固废资源化—环境工程材料制备—环境污染控制应用的全链条技术路线,在实现固废资源化利用的同时,达到了“以废治污”的最终目的。研究结果如下:(1)陶粒最佳制备条
脑电图是一种记录人体大脑中神经细胞群电生理活动的主要工具,常用于检测神经性疾病。本文以癫痫患者和有睡眠障碍的患者为研究对象,利用智能算法分析脑电信号,实现癫痫的自动检测与睡眠阶段的自动分期。癫痫疾病是由于人体脑部中的神经元之间放电异常,使得人脑发生功能性障碍。睡眠是一种常见的生理现象,睡眠时脑部敏感度较低,一些潜伏疾病易在睡眠时出现,并且在整个睡眠过程中出现的时机也不同,所以分析睡眠周期是研究睡眠
目的 :了解甘肃省定西市中小学生近视影响因素,为定西市中小学生近视防控工作提供数据支持。方法:2020年3月17—30日在定西市随机抽取42所中小学校,在每个学校每个年级各选择一个班级,以班级内的所有学生为调查对象进行问卷调查。采用单因素分析和多因素logistic回归分析方法筛选近视的影响因素。结果:调查共纳入中小学生18 649名,其中可能近视者12 990人,占69.7%。分析结果显示,女生
中医腹诊属于中医四诊之一,以切诊胸腹部为主,通过诊察病情得出腹证,以指导临床遣方用药。中医腹诊历史悠久、博大精深,近现代关于腹诊的理论与实践研究日渐丰富,临床可应用于内、外、妇、儿科等各科疾病,且腹诊具有操作简便、客观直接、实用性强的特点。牛学恩教授临床经验丰富,擅长运用经方,并基于中医辨证论治体系将腹诊与经方相结合,临床效果显著。文章通过对牛学恩教授临床常见腹证医案进行研究分析,以体现腹诊的重要
海底隧道有效缩短海峡两岸区域交通运输距离,为两岸交通互通提供了极大便利。由于其独特的结构形式,海底隧道成为一种纵向空间高度有限、车道宽度较公路窄、具有一定纵坡坡度与曲面弯度的相对封闭的交通空间环境。隧道交通安全运行需人、车、路及环境等多重因素相互协调、相互配合,任一因素环节出现问题,皆有可能导致交通事故的发生。为了降低海底隧道交通事故发生率,以海底隧道平纵线形路段、出入口段为研究对象,分析考虑照度
在文化振兴的时代背景下,以科学的方式阐述中国传统园林中的思想智慧与文化特质是当代中国传统园林文化研究的理论重点方向之一。传统园林审美是中国人独特观照方式与视觉偏好的功能与美学结晶,其中视觉认知是产生园林空间和意境的起点。艺圃作为明末清初的传统园林代表,保留了建造之始整体空间布局,景象丰富,精在体宜,适合传统园林文化研究,对当下的园林文化研究有较高的历史与艺术价值。研究遵循“理论分析—实证检验—总结
基于2010~2020年IASI卫星观测数据,利用排放通量法对中国NH3排放量(分辨率为0.25o×0.25o)进行了估算,分析了中国NH3排放的时空分布和长期变化趋势.结果发现,2018~2020年中国NH3平均年排放量和排放强度分别为18.61 Mt和1.93 t·km-2,排放强度高值区主要集中在华北平原和成渝地区.中国NH3排放具有明显的季节变化,春、夏、秋和冬4个季节的排放量分别占全年总
目前,汽车安全辅助驾驶被认为是解决交通安全问题的有效手段之一,其在驾驶危险发生前通过对驾驶员预警或适时介入车辆控制的方式提高车辆运行安全性。在车辆控制权由驾驶员转移至车载自动控制系统过程中,控制权的直接切换往往会引起车辆状态的突变,从而给驾驶过程带来潜在安全隐患。如何从人机协同角度出发,实现车辆控制权从驾驶员向自动控制系统的柔性切换是解决上述问题的关键。基于此,本研究在对车辆控制权柔性切换机理解析