基于RealSense的三维动态手指姿态识别技术

来源 :重庆邮电大学 | 被引量 : 0次 | 上传用户:lylh0628
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着手指姿态识别技术的不断成熟,其广泛应用于现今各种交互场景中。为适应虚拟现实、超大型屏幕等交互设备对文本输入的新要求,空中文本输入技术也随之出现。本文在空中十指文本输入场景下对三维动态手指姿态识别进行了研究,发现目前技术存在关节点定位鲁棒性差、单词识别耗时过长等问题,为进一步提高空中文本输入方法的识别率和识别速率,就存在的问题做了相应的研究和改进,主要工作包括:第一,针对手部关节点定位中因自遮挡导致手指关节定位不准确的问题,提出了一种基于位移速度的3D关节点位置估计方法。该方法是在基于位移速度的2D目标点位置估计方法的基础上,将2D目标点状态向量改进为3D关节点状态矩阵,利用视觉传感器获得的3D关节点数据作为初始数据,通过Kalman滤波器对3D位置坐标数据进行位移速度运算,完成当发生位置偏移时3D关节点的位置估计。实验表明,该方法在满足实时性的要求下减少了关节点定位误差。第二,针对基于手指序列的文本输入识别方法中存在单词识别耗时过长的问题,提出了一种基于敲击字母识别的空中文本输入识别方法。该方法是在基于手指序列的空中文本输入识别方法的基础上增加了对敲击字母的识别,进一步提取敲击手指特定关节长度和弯曲角度作为特征值,使用K-NN分类算法识别敲击字母,当连续敲击获得候选单词时,通过朴素贝叶斯文本输入模型计算候选单词概率,最终输出概率最大的单词。实验表明,该方法提高了敲击字母识别能力,并且有效减少了朴素贝叶斯文本输入模型的计算量,提高了单词识别速率。第三,在上述研究的基础上,设计并实现了一个基于手指姿态的文本输入识别系统。该系统通过RealSense 3D摄像头实时获取深度图像信息,通过RealSense SDK相关函数实现手部关节点识别。运用第三章和第四章研究内容,有效防止了关节点漂移的问题,实现了基于手指姿态的空中文本输入识别技术。
其他文献
本文从电视包装的含义入手 ,重点分析了电视包装在电视节目中的作用 ,分 4部分阐明了作者的观点 :电视包装不仅仅是电视节目的外在形态设计 ,而且要和整个电视节目内容融为一
低渗透砂岩气藏勘探表明,其形成与分布具有独特的特征,很难用常规天然气成藏理论进行解释与描述。在低渗透砂岩天然气岩心充注模拟实验的基础上,对低渗透砂岩天然气藏的运移和聚
本文基于2013-2017年16家上市商业银行的面板数据,实证分析我国金融监管、金融业开放与银行特许权价值的关系。研究结果表明,金融监管强度、外资银行进入显著提升了银行特许
<正>去年,我曾作为中山市名师工作室主持人考察团成员赴台湾交流学习,参观考察了台湾永建国小、新竹中学等学校。无论是永建国小还是新竹中学,学校大门都是由两条刷上米石的
采用微根管技术与挖掘法相结合的方式对福建省万木林自然保护区细柄阿丁枫和米槠天然林细根生产和死亡动态进行了为期两年多的观测,分析细根生产和死亡的季节变化、垂直分布
<正>昨天,我给老爸打电话,让他给我炒一些炒面带走。在电话中,父亲听不清楚,我只好大声地喊,他说他以为我要回家吃晚饭,过了一会儿他终于听明白了。我很惭愧,我一个星期都没
期刊
贾宪是北宋时期数学界杰出代表,其数学成就体现在《黄帝九章算法细草》9卷之中,可惜这部著作目前已散佚。在贾宪死后的200年后,数学家杨辉在其著作中采用一部分数学研究成果,
文化和语言的关系好比是内容和形式的关系,内容决定形式,形式反映内容。语言和文化密不可分,而词汇又是文化的最直接反映,因此透过词汇的互借可以看到中西文化之间的相互渗透和相
利用毛细管电泳(capillary electrophoresis,CE)仪结合紫外-可见光二极管阵列检测器检测技术建立水体中痕量微囊藻毒素的检测新方法。通过与GB/T 20466—2006《水中微囊藻毒素
在能源与环境问题日益严重的今天,发展将太阳能转化为化学能并且可以治理环境污染问题的光催化技术是解决此问题的有效途径之一。g-C_3N_4作为一种新型可见光半导体材料,具有潜在的应用价值。碳点作为一类新型的碳纳米材料,以独特的结构和优良的性质受到诸多研究者关注。因此,引入碳点来改性g-C_3N_4,可以扩大光吸收范围、增强电子传输能力、抑制光生载流子的复合,具有重要的研究意义。本文的主要内容如下:1