面向VR视觉不适的智能位置感知方法研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:zhaoyu_hit
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
虚拟现实(Virtual Reality,VR)作为一种全新的视觉显示技术,通过头戴式显示器(Head-Mounted Display,HMD)等设备能够使用户沉浸于虚拟的立体环境中,为人们带来了新的视觉体验,满足了人们对新型信息展现方式的要求,逐渐成为计算机图形学、计算机视觉、运动感知等领域的重要研究课题。然而,VR显示设备在带给用户立体信息的同时,常常会引起用户视觉不适,这种视觉不适现象严重制约了VR的发展,因此开展关于视觉不适的研究具有重要的意义。本文针对VR系统无法准确定位而引起的视觉不适问题展开研究,致力于构建视觉不适预测(Visual Discomfort Prediction,VDP)模型预测用户观看立体图像时的视觉不适程度并评估引起虚拟空间定位不准的深度差异对视觉不适的影响,同时研究虚拟空间以及真实物理空间的定位算法,提高相关定位算法的准确性,为缓解视觉不适和实现友好的人机交互提供理论支持。包括以下几个研究内容:(1)研究基于图像特征的VDP模型。首先结合视觉注意力机制,设计并提取了场景结构特征和深度差异特征,并以此构建了基于场景结构和深度差异的VDP模型,该模型在预测视觉不适得分的同时能够客观评估深度差异对视觉不适的影响。然后,为了更准确的预测视觉不适得分,提出了基于双路径特征融合的多任务VDP(Two-path Feature Fusion and Multi-task Visual Discomfort Prediction,TFM-VDP)模型。该模型受人类视觉系统(Human Visual System,HVS)特征整合机制的启发,构造了双路径特征融合结构,以此挖掘更多与视觉不适相关的图像信息表征人类的视觉不适感知。并且采用多任务学习的方式,同时考虑不适等级分类任务和不适得分回归任务,通过预测不适等级类别引导不适得分预测,进一步提高模型的预测性能。实验结果表明所提TFM-VDP模型与现有VDP模型相比预测效果更好。(2)针对用户的感知深度和VR系统设定深度不一致导致虚拟空间定位不准的问题,提出了一种基于HVS深度感知的定位方法,准确定位用户视觉系统感知的自身在虚拟空间中的位置。所提方法采用视线跟踪算法建立用户的深度感知模型,获得HVS的感知深度。之后利用感知深度构建相对于人眼的内参矩阵,与相机的内参矩阵结合,在没有标记目标以获得设定深度的虚拟空间中,自适应地获得VR系统的设定深度,从而得到感知深度和设定深度的差异,最终依据深度差异正确获得用户感知的自身位置。此外,在视线跟踪丢失时,结合视线跟踪未丢失前感知的深度信息和视线注视点局部区域图像信息,加权计算局部图像区域对应的深度差值,从而在视线跟踪丢失后利用局部图像区域的深度差值仍能获得用户感知的自身位置。充足的主观视觉不适实验表明依据所提方法而改进的VR系统能够有效缓解视觉不适。(3)针对视觉同步定位与建图(Simultaneous Localization and Mapping,SLAM)方法在具有重复或相似纹理的复杂真实物理空间中定位不准的问题,提出了一种采用长距离特征描述和语义块优化(Long Distance Features Description and Semantic Block Optimization,LDFD-SBO)的定位方法,准确定位用户在真实物理空间中的位姿(包括位置及姿态)。LDFD-SBO方法在视觉SLAM的特征匹配环节,通过捕获图像特征点十字交叉路径上的长距离像素信息,生成具有长距离依赖关系的特征描述子(Long Distance Features Description,LDFD),该描述子增强了相似或重复区域特征点的可区分性,能够减少特征的误匹配。同时,在视觉SLAM的位姿优化环节,LDFD-SBO方法以图像上不同语义类别的区域块为单位,采用互信息理论自适应地获得不同类别语义块区域内特征点与位姿估计的相关度,通过更关注相关度大的语义块区域内的特征点,避免了对图像特征点无差别处理造成的定位失败。实验结果展示了所提算法的优良性能。
其他文献
随着我国经济持续增长和城市化进程进一步发展,城市轨道交通建设与土地资源短缺之间的矛盾日益凸显,利用地铁车辆段上部空间进行物业开发已成为各大城市地铁系统建设趋势。但盖下车辆段列车运行容易引发上盖建筑结构振动及二次辐射噪声,降低舒适度。现有车辆段上盖物业舒适度影响研究主要针对上盖建筑单体开展,在振源、传播路径、受振体各子系统的动力特性及其相互作用方面尚未形成清晰统一的认识,对车辆段列车运行引起的环境振
学位
加强新时代廉洁文化建设是一体推进不敢腐、不能腐、不想腐,永葆党的先进性和纯洁性的必然选择。在推进全面从严治党向纵深发展的大背景下,新时代廉洁文化建设之路道阻且长。以文化人、以廉养德,推动廉洁文化建设实起来、强起来,已成为党员干部守好为政之本的应有之义。
期刊
<正>近日,由四川省纪委监委、省委宣传部、眉山市委主办的四川省第二届“510(我要廉)”廉洁文化宣传月活动在眉山正式拉开序幕。本届活动以“清风润万家·廉韵启新程”为主题,以5月10日为时间节点,策划推出2个阶段16项主题活动,同步联动各市(州)开展系列配套活动,集中在5月开展并贯穿全年。据悉,本届活动邀请国家级词曲作家与社会力量创作活动主题歌曲《明月清风和我》,推出了“廉洁四川”LOGO设计大赛、
期刊
降低机械零部件的摩擦磨损对现代工业水平进步及社会发展具有重要的现实意义。过渡金属氮化物涂层以其耐磨、耐腐蚀等优异特性被广泛应用于航空航天、机械加工、船舶运输等领域。然而随着社会的不断发展,二元过渡金属氮化物涂层因其性能单一已经不能满足日益严苛实际应用需要,并且过渡金属氮化物涂层的催化活性也逐渐被摩擦领域所重视。因此,有必要对过渡金属氮化物涂层的组分和微观结构等进行调控,以保证涂层在恶劣工程环境中发
学位
随着信息化与科技化时代的来临,信息技术教学的重要性进一步凸显,其教学地位也显现出持续上升的趋势。Scratch教学在信息技术教学当中占据极大的比重,是提高学生信息技术综合学习与应用能力的一个重要途径。在Scratch教学活动当中,传统教育模式无法满足教学要求,也不能够综合提高学生的信息素质,在这样的背景之下,项目式教学的产生与应用给Scratch教学的创新发展提供了优质条件。对此,教师要加强对项目
期刊
<正>摘要目的评价核芯针穿刺活检术(core-needle biopsy,CNB)在细针抽吸活检术(fine-needle aspiration,FNA)未能明确诊断的甲状腺结节中的应用价值。材料与方法回顾性分析2008年10月—2011年7月155例FNA未能明确诊断的甲状腺结节155个,年龄22~76岁,平均年龄51.8岁,其中男37例,女性118例。用Bethesda甲状腺细胞学报告系统评价
期刊
目的探讨甲状腺结节的US及细胞学结果联合分类报告系统的实用性,从而指导重复超声引导细针穿刺细胞学检查(FNAC)。材料与方法本研究获得伦理委员会批准,且本回顾性研究不需签署知情同意书。从2001年6月—2009年12月,共有1084例(978例女性,106例男性)进行过重复超声引导FNAC的甲状腺结节病人入组。FNAC结果采用Bethesda系统来报告,Bethesda系统应用于甲状腺细胞病理学结
期刊
空间声的目的是再现声音的时间与空间信息,给倾听者产生各种不同的听觉感知。空间声是声学、信号与信息处理方面的前沿课题,并在影音重放、多媒体与虚拟现实、通信、计算机与互联网等方面有重要的应用。目前空间声的一个发展趋势是增加重放通路,以改善重放声音空间信息的能力。但这同时也使系统及其扬声器布置变得复杂,给电视、多媒体计算机以及家庭影院等实际应用带来困难。为了适应不同的实际应用,需要发展通用的多通路空间声
学位
加强新时代廉洁文化建设,是从精神文明的角度来促进廉洁从业,从思想上固本培元,提高党性觉悟,增强拒腐防变能力的一项基础性工程。当前,油田企业在落实新时代廉洁文化建设过程中,还存在一系列亟待解决的问题。在此结合坪北经理部新时代廉洁文化建设的鲜活实践,分享相关经验做法,通过分析推进新时代廉洁文化建设中存在的四点不足,提出相应对策和建议。
期刊
射频前端系统中,射频滤波器作为关键组件,其高性能和小型化对系统性能提升和体积缩减至关重要。实际链路中,其常需与巴伦、功分器、开关等其它功能器件进行级联使用。这种级联架构不仅体积庞大且损耗较高。将滤波器件与其它功能器件进行融合设计,得到滤波多功能电路,可有效解决以上问题。然而,面向多频多制式和抗干扰等通信系统发展趋势,滤波器与滤波多功能电路仍有诸多理论与技术的瓶颈亟待突破。为此,本文依托适用于基站的
学位