基于手势识别的交互式全息显示研究

来源 :昆明理工大学 | 被引量 : 0次 | 上传用户:keaiyuyu66
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着三维显示技术的发展,新兴的显示界面渐渐进入到人们生活中,例如虚拟现实(VR)和增强现实(AR),而全息显示作为真正的三维显示技术,是未来显示界面的终极目标。将基于视觉的手势识别与全息显示界面结合,能够将用户带入沉浸式的情景体验,更加贴近人在自然界的交互方式,具有深远的研究意义。交互式全息显示系统中手势的识别能力关乎用户能否成功、舒适和自然的交互,因此寻求稳定、高效的识别方式是目前研究的热点。本文主要针对静态手势与动态手势识别技术进行了深入研究;另外研究了空间光调制器的自动控制,搭建并实现了基于静态手势的交互式全息显示系统。本文主要研究工作如下:1.针对静态手势识别,准确的手势分割是后续识别精度的重要保障,在复杂背景下,往往很难精确的分割出手势区域,本文根据肤色在HSV和YCr Cb颜色空间中不同的聚类特性,选择对HSV和YCr Cb颜色空间肤色分割结果进行融合的方法,也就是取与操作,减少了对背景区域的误判,获得比单一颜色空间更好的分割效果。其次,在手势的定义上,仅靠指尖与质心的角度来判别手势的方法容易因滑动角度小而识别错误,本文提出一种设置手势起始区域的方式从新定义了手势,最后实现了对停止、右滑和左滑手势的准确识别。2.针对交互式全息显示:首先,搭建了交互式全息显示系统;其次,为了实现交互系统中全息显示的自动控制,本文把空间光调制器作为外部监视器调用,采用Psychopy工具箱对外部监视器呈现刺激的功能,实现了对空间光调制器的自动控制;本文将具有12881个视点的三维物体以1°为间隔离散为360个视角,生成360幅全息图,把静态手势指令映射为全息图不同的读取顺序,最后实现了静态手势下全息影像左右转动的交互显示。3.针对动态手势识别:本文提出一种基于2D CNN+双向LSTM网络的组合模型应用于动态手势识别,首先利用2D CNN提取图像序列中每一张图像的特征向量,组成特征向量序列,之后将特征向量序列作为双向LSTM网络的输入,以提取动态手势特征在时域内的联系。该神经网络模型利用Cambridge-Gesture公共数据集进行了测试,获得了比以往其它方法更高的识别准确率,准确率为95.56%,验证了2D CNN+双向LSTM网络模型在动态手势识别中的有效性。
其他文献
随着世界经济全球化的到来,我国对外贸易迅速发展,进出口贸易额不断攀升,已然成为我国国民经济中重要组成部分、国民经济强大的推动动力。然而,对外贸易的环境并非风平浪静的。在全球经济不断变化的格局下,市场竞争多元化、支付方式多样化、产品贸易复杂化等多种因素导致对外贸易中的风险随处可见,风险发生的概率也在不断增加,带来的影响也日益加剧。传统的风险预警系统和风险防范机制已经无法顺应当下对外贸易发展中的复杂性
随着经济的发展和社会的进步,水污染问题日益严重,对人们的生活和健康造成了巨大的威胁。光催化技术作为目前具有应用前景的污水处理方法之一,可以将大多数难降解的有机物降解为CO_2、H2O和一些无毒无害的小分子物质。石墨相氮化碳(g-C_3N_4)由于具有化学性质稳定、制备方法简单、带隙窄等优点,因此受到了越来越多的关注。然而,g-C_3N_4的比表面积小、光生电子-空穴复合率高、回收难度大等限制了其在
近年来,随着电子技术的不断发展,军用航空电子设备也在不断发展,对于体积与可靠性的要求也越来越高。本文研制的流量标准器模块正是基于用户对体积有了更高的指标要求进行的改进。该模块是我国某重点机型燃油控制系统中的关键部件,主要实现信号转换的功能,由于机载复杂恶劣的环境对性能、可靠性、体积等要求较高,过去为进口器件,但由于整个燃油控制系统需要升级对于该模块的封装体积要求更小,因此本文在参考原有进口器件的基
氢气是一种理想的清洁能源,其具有燃烧效率高、产物无污染、自然界广泛存在并且可循环等优点。但氢气化学性质活泼,极易引发爆炸,氢气摩尔质量最小而易于发生泄漏。这些缺点限制了氢气的广泛使用。人们急需一种有效的氢气监控设备,从而降低氢气使用的安全风险。目前已经存在基于热学、电学、机械学、声学和光学等原理为基础的氢气传感器。相较于其它种类,基于光学的氢气传感器不会受到电磁波的干扰,并且具有灵敏度高、集成性强
随着中国特色社会主义进入新时代,国家对公务员队伍建设提出了许多新要求,习近平总书记在党的十九大报告中提出“要建设高素质专业化干部队伍”,为新时代干部队伍建设指明了方向。当前,我国的贸易便利化和自由化程度地不断加深,海关执法的规范性、统一性以及专业性要求也随之不断提升。2018年3月,《深化党和国家机构改革方案》决定,将出入境检验检疫管理职责和队伍划入海关,新海关在原有的监管、征税、缉私、统计四大职
随着数据不断涌现,我们迎来大数据时代。在这种时代背景下,数据资源对我们来说尤为重要。世界上很多发达国家将大数据技术作为提升国家竞争力、维护国家安全的重大战略。可以说谁掌握了数据,谁就掌握了主动权。数据如此重要,在数据海洋中挖掘出有价值的数据更为重要。然而实际生活中存在大量不平衡数据,在它们当中少类样本远远少于多类样本,而将少类样本正确分类的意义远远高于多数类样本。解决不平衡数据分类问题已成为很多领
γ-氨基丁酸(γ-aminobutyric acid,GABA)在哺乳动物机体中发挥着重要的抑制性神经递质的作用,可以与相应受体结合,在哺乳动物体内中发挥重要的生理生化功能,调节生长激素的分泌、活化肾脏功能、提高免疫力、促进食欲、缓解应激、促进有益菌群生长等作用。但目前有关GABA在仔猪上的研究较少,因此本试验旨在研究GABA对仔猪的生长性能、血清生理生化指标、养分表观消化率和粪便菌群微生物的影响
人口老龄化问题在当今社会已经逐步成为全球关注的焦点问题,由于老龄化问题的逐渐加剧,我国所面临的养老方面压力也越来越大,因此人口数目较大的农民养老问题也成为政府工作的重中之重,真正做到保障好全体老年人的生活,真正实现“老有所养,老有所依”的目标也成为全社会重点关注的问题。城乡居民养老保险制度是我国社会保障制度中的一项兜底性保障制度,在实现保障城乡居民基本生活目标方面发挥着重要作用,因此这项制度引起了
无人驾驶技术所涉及到的学科比较广泛,当其在技术上有所突破后可以对当它学科的发展起到促进作用,所以无人车的发展越来越受到社会的重视。其中所包含的交通标志的检测与识别技术是无人车安全行驶的保障。由于受到外界环境的影响,比如光照、运动模糊等情况,给实际的检测带来了许多问题和挑战。本文为了满足无人车对于交通标志识别的要求,采用图像检测算法对交通标志的形状特征和颜色特征进行检测,然后将检测后的图片使用卷积神
我国2009年开展新型农村社会养老保险制度的试点工作;2011年开展城镇居民社会养老保险试点工作;2014年将两者合并,建立统一的城乡居民基本养老保险制度。但从现行统一的城乡