基于HoloLens增强现实的关键技术研究与实现

来源 :西南交通大学 | 被引量 : 0次 | 上传用户:st841004
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
增强现实系统关键技术包括虚拟现实融合、三维配准、实时交互,其中核心在于目标对象的检测定位,即三维配准。随着大数据、硬件技术的不断发展,大量的实验证明,相比以人为设计并提取特征点的传统机器学习方法,以卷积神经网络为核心的深度学习技术大大提高了图像检测的效率和精度,广泛应用于各行各业。针对增强现实系统中关键技术的精度效率要求以及交互方式要求,本文在以下方面进行了研究与实现:(1)为了实现数据的普遍性,从背景、照明,对象大小、拍摄角度等多方面考虑,针对常见的实验室设备,自制数据集并标定,同时利用翻转、缩放、裁剪等数据增强方法来扩充数据集以获取更好的训练拟合,利用自身训练的网络模型,与Faster R-CNN网络进行比对,依据实验结果选出更优的目标检测网络。(2)在目标检测模型返回的边界框的基础上,设计出一种结合射线碰撞、计算边框的方法,对检测目标进行物理空间定位,为叠加模型提供空间坐标,并从主观和客观角度最终评价检测模型。(3)对前期制作的3D设备模型进行不同方法的贴图渲染,设计烘焙移植方法来选出最好结果以适应增强现实设备的计算力。(4)综合以上三点,利用Voice、Gesture、Gaze等交互方法,对叠加模型设计出不同的交互方式。(5)利用增强现实设备HoloLens,设计并开发出一款基于HoloLens的增强现实设备检测与定位交互系统。该系统可以检测定位实验室设备并依据空间位置叠加模型,还可以对模型实时进行多种交互,如分解、移动、旋转等。以上实验结果表明使用本文提出的方法可以较精确检测定位实验室设备,并能简单、流畅、舒适的体验与叠加模型的交互功能,给使用者在设备检测组装、拆解学习上提供一种全新的可视化交互感受。
其他文献
通过实验研究了复合添加剂对CO2水合物生成条件的影响,选用十二烷基硫酸钠(SDS)和十二烷基苯磺酸钠(SDBS)以及两者的混合溶液(按1∶2的比例)作为实验用溶液,研究发现当采用质
房地产行业发展中需要运用大量资金,因此,房地产企业成为商业银行重要的贷款客户之一,贷款利息收入为商业银行创造了丰厚的利润。但是房地产经济发展中逐渐呈现出结构性过剩
对外直接投资(OFDI)是一个国家(地区)经济参与国际竞争的主要形式,近年来我国企业对外直接投资在国际上的影响力越来越大,并日益发展成为我国对外贸易新的增长点。很长一段时
观察不同低氧训练方式对红细胞调控T淋巴细胞免疫及亚群的影响。用低氧舱模拟4000m高原低氧环境(12.6%氧浓度),将50只SD雄性大鼠随机平分为5组:高住高训组(HiHi)、高住低训组
在职业教育事业进一步发展的背景下,对中职学生而言,创业已然成为不错的选择。但我国创业 教育发展并不成熟,特别是对中职学生的创业教育还停留在摸索阶段,因此,需对如何进行
2015年1月中缅油气管道全线贯通,2017年8月云南省第一家炼化企业建成投运,这对国家调整优化能源布局、保障能源战略安全、缓解西南地区能源紧缺、促进地方经济发展带来了积极、重大且深远的影响,同时对云南省成品油市场带来了大的影响。此外,近年来国家成品油零售领域开放力度逐渐加大,大数据、人工智能的广泛运用,第三种出行方式的渐成规模,可替代能源的不断兴起,企业规模扩张及运营成本的不断增加,这些都给云南
<正>近日,江苏省苏州市审计局与该市公安局联合印发了《关于进一步加强工作协作配合的实施意见》,以加强合作,实现资源整合和优势互补,充分发挥审计机关与公安机关在维护国家
<正>1款14t叉车,当其配装纸卷夹属具作业时,其液压系统温升过快。本文在分析该叉车液压系统工作原理的基础上,提出改进方法。1.工作原理该款叉车液压系统采用定流量开式回路,
以混合式教学模式为出发点,以内蒙古工业大学2017级学生实施的大学英语教学模式改革为背景,探究混合式教学模式在大学英语教学中的实施效果,同时总结教学改革经验教训,力图进
现代电力系统的一个重要特征就是分层分区互联运行,负荷频率控制对于保证多区域互联电力系统的稳定运行具有重要意义。随着大量光伏发电、风力发电等间歇式、随机性分布式可