【摘 要】
:
作为人机交互的重要方式之一,动态手势识别技术在“国家重点研发计划”中被多次强调,已经引起了各行各业的广泛关注。此前,大多数的研究都是通过普通摄像头来捕捉动态手势从而获得手部特征信息,但这类信息通常比较粗糙且不能很好的代表动态手势。而随着一批深度视觉传感器如Leap Motion的出现,为动态手势识别研究带来了可靠的数据保障。但是目前基于Leap Motion,国内外研究人员在一些美式手语和日常手势
论文部分内容阅读
作为人机交互的重要方式之一,动态手势识别技术在“国家重点研发计划”中被多次强调,已经引起了各行各业的广泛关注。此前,大多数的研究都是通过普通摄像头来捕捉动态手势从而获得手部特征信息,但这类信息通常比较粗糙且不能很好的代表动态手势。而随着一批深度视觉传感器如Leap Motion的出现,为动态手势识别研究带来了可靠的数据保障。但是目前基于Leap Motion,国内外研究人员在一些美式手语和日常手势的分类与识别研究上取得的识别准确率不是很高。因此,本文旨在提高对这类常用动态手势的识别准确率,提出一种基于Leap Motion和双向长短期记忆网络的识别系统,在选择哪些手势特征来代表动态手势、如何有效地捕捉到动态手势和如何设计合适的识别模型这三个方面来进行研究。首先,针对选择哪些手势特征来代表手势,本文提出了一种能有效代表动态手势的手势特征向量组。向量组中的每一个向量均由26个手势特征值组成,这26个手势特征值可以分为六大类,分别是指尖与掌心的距离、手指与掌平面夹角、指尖距离掌平面的高度、相邻两指间距、相邻两指与掌心连线夹角和掌心坐标。向量组中向量的个数随动态手势执行时间变化。然后,针对如何有效地捕捉到动态手势,本文设计了一种有效的动态手势采集算法。通过侦测Leap Motion中当前帧和前一帧之间的掌平面三维转动差角和当前帧中手指的移动速度,来判定动态手势的开始和结束,进而采集有效的动态手势。当手掌在传感器三维坐标系中的旋转角度大于对应阈值或者指尖移动速度大于对应阈值,则判定为动态手势执行开始且传感器开始传输手势特征值;当手掌旋转角度和指尖移动速度同时小于等于对应阈值,则判定为动态手势执行结束且传感器停止传输手势特征值。通过采集算法和代表手势的特征值,本文建立了三个动态手势库:带360个样本的美式手语库、带480个样本的美式手语库和带300个样本的工艺手势库。接着,针对如何设计合适的识别模型,本文提出了一种新颖的动态手势识别模型:两层的双向长短期记忆网络。该模型主要由两个双向长短期记忆网络竖向堆叠而成,结合高斯初始化网络参数、周期循环变化学习率、随机失活网络元素和Adam梯度下降。最后,将所建立的三个动态手势库分别按7:3、6:4和7:3的比例划分成训练集和测试集,对所设计的分类识别系统进行了详细的测试、验证与比较。其中,在包含360个样本的美式手语库上,该识别系统在训练集和测试集上分别达到了100%和96.3%的准确率。在包含480个样本的美式手语库上,该识别系统在训练集和测试集上分别达到了100%和95.2%的准确率。在工艺手势库上,该识别系统在训练集和测试集上分别达到了100%和96.7%的准确率。为了进一步验证模型的识别效果,本文对其进行了五折、十折和留一交叉验证。在五折交叉验证中,识别系统在带360个样本的美式手语库上达到了93.33%的准确率;在带480个样本的美式手语库上达到了93.75%的准确率;在工艺手势库上达到了88.66%的准确率。在十折交叉验证中,识别系统在三个动态手势库上分别达到了94.1%、93.5%和90%的准确率。在留一交叉验证中,识别系统在三个动态手势库上分别达到了94.7%、96.4%和90.3%的准确率。与此同时,在同等条件下,将所得实验结果与国内外的研究结果进行对比。结果表明该识别系统在特定动态手势上的识别准确率高于国内外研究中的识别准确率,表现出了更好的识别性能。
其他文献
有机磷酯类化合物的广泛使用使得有机磷残留通过食物链在生物体内富集,使人类健康受到极大威胁。寻找一种低成本的去除有机磷残留物的方法迫在眉睫。嗜热磷酸三酯酶样内酯酶(Phosphotriesterase-Like Lactonases,PLLs)是一类天然内酯酶,具有低磷酸三酯酶活性,同时能够水解对氧磷以及包含酰基高丝氨酸内酯在内的各种内酯。因此,可以作为有机磷酯类化合物农药残留的目标蛋白。为探究PL
香芋(Taro),又称槟榔芋(Colocasia esculenta),属于天南星科魁芋属(Dendrobium)植物。原产于中国和印度的热带潮湿地区。香芋具有一定的食用价值和药用价值。最近几年,市场对香芋的需求量突飞猛涨,导致香芋价格不断上涨,市面上出现了一些以香芋为原料的初加工产品,但总体来说香芋深加工产品还是较少,以香芋为原料来酿酒的企业更是寥寥无几。所以香芋的深加工研究也变得更为重要。本研
随着有机多孔材料的发展,超分子有机框架(SOFs)材料因其独特的优势得到了越来越多的关注。但是其堆积单元多局限于平面多臂型分子,过于单一。因此对于SOFs材料来说,新骨架的
随着我国经济的迅猛发展、城镇化水平以及人民日益增长的物质文化需求的不断提高,我国的商业地产项目也呈现了迅猛的增长态势。在新的科技、理念下,新建大型商业地产项目逐渐呈现出规模大、建设周期长、技术复杂、参建单位众多等特点。这些特点构成了大量、复杂的设计界面,这就对项目的设计管理工作提出了很高的要求。通过对地产项目资料的学习和研究,一个地产项目在其全价值链条中,设计阶段尤其重要,设计阶段往往决定了项目投
本文从热生理学和行为生态学的角度,以鬣蜥科(Agamidae)沙蜥属(Phrynocephalus)的荒漠沙蜥(Phrynocephalus przewalskii)和蜥蜴科(Lacertidae)的麻蜥属(Eremias)的丽斑麻蜥(Eremias argus)和密点麻蜥(Eremias multiocellata)为研究对象,分别测量两地理区域不同蜥蜴种群的静呼吸代谢率和运动能力,着重研究同域
随着科技的发展,超光滑表面材料的应用变得越来越广泛,对透明超光滑表面元件的面形精确测量的要求也随之提高。在测量透明平行板的光学元件时,通常都会产生多表面干涉叠加的
近年来,蛋白质的拓扑工程及拓扑蛋白合成机制引起广泛关注。本文就这两个问题分别进行了研究。1.蛋白质拓扑工程的应用体现了在改变蛋白质稳定性和功能的良好成果。受自然界
长期以来,煤炭作为重要的化石能源在推进整个世界发展的过程中起着举足轻重的作用,以煤炭为主的能源结构将在未来很长时间内难以改变。但煤炭燃烧的过程中会产生大量的污染物,比如烟尘、二氧化硫、氮氧化物等,所以燃煤烟气污染物排放标准也日益严格。循环流化床炉内低氧燃烧结合后燃技术,该技术通过改变循环流化床炉内的燃烧气氛,在保证燃烧效率的同时实现了低NO_x排放。循环流化床炉内呈现出燃烧气氛完全不同的密相区和稀
基于传统的欧几里得方法建立的压裂水平井渗流数学模型仅适合于表征均质储层,难以描述实际压裂裂缝分布的不均匀性,因此,为了精准地描述储层内裂缝复杂的分布和连通特征,需要
柴油机进气系统内部结构与流动性能的好坏会对柴油机的动力性、经济性与排放特性产生最直接的影响。同时,提高柴油机功率的关键在于换气过程当中提升充量系数同时降低进气系统的流动阻力。设计和匹配最优的柴油机进气系统,就能使柴油机在一定转速范围内提升进气量,提高功率,降低油耗率。所以,研究并改善进气系统的性能与结构无论从理论方面还是从实践方面都是很有必要的。本论文首先使用一维仿真软件GT-POWER创建了该型