基于深度相机手势识别的隔空翻书技术研究

来源 :安徽大学 | 被引量 : 0次 | 上传用户:ghostlei
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着科学技术的飞速发展,人机交互方式更加多元化、自然与舒适,如较新颖的触控、语音、手势等交互方式,其中利用手势动作来实现人机交互成为国内外研究热点。手势识别技术从最初的基于数据手套、采用2D摄像头到现如今更受研究者青睐的3D摄像头,技术手段越来越丰富。基于手势识别的隔空翻书是让用户利用手势动作控制记载丰富资料(包括动画、视频、图片等)的电子书,达到翻阅、查看书中内容的效果。其新颖的模式可以使展览馆、图书馆以及政府等单位在通知、科普和宣传等方面提高影响力,不但可以展示丰富的信息,而且能够吸引人们驻足观看,具有科普宣传的效果,应用前景良好。而目前隔空翻书技术大多采用红外感应方式或基于2D摄像头的手势识别方法,其缺点是功能局限、趣味性不高,易受周围光照环境影响而造成错误识别等。针对上述问题,本文提出了手部相邻帧的位移结合有限状态自动机FSM(Finite State Machine)的思想来进行连续动态手势起止检测的方法,以及一种改进的DWDTW(Distance Weighting Dynamic Time Warping)方法来计算参考手势样本与测试手势样本间的距离,提高了在光照较暗、光照较强以及复杂背景下该动态手势识别方法的鲁棒性。为了增强隔空翻书的交互性、实时性、精确性,结合Intel SR300深度摄像头,利用RealSense动态手势识别技术,本文设计并实现了隔空翻书系统。本文的研究内容主要如下:(1)在充分调研并分析了隔空翻书系统所涉及的常见需求后,定义了包含6类动态手势的手势集合,并使用Intel SR300深度摄像头录制动态手势样本,建立了包含960份动态手势数据RS-DHG(RealSense Dynamic Hand Gesture)数据库,主要包含了动态手势的彩色图像序列、深度图像序列以及手部22个关节点三维位置信息。(2)在手势起止检测一般方法的基础上,提出了手部相邻帧的位移结合有限状态自动机FSM的思想来进行连续动态手势起止检测的方法,分别从关节点运动轨迹以及手型变化两方面进行特征提取,提取的特征向量有关节点运动轨迹、欧氏距离、角度特征等,增强了特征提取的有效性。(3)在传统的动态时间规整算法的基础上,提出了一种改进的DW-DTW方法来计算参考手势样本与测试手势样本间的距离,再通过K-最近邻分类器对动态手势进行分类识别以获取识别结果,并通过实验选取了KNN(K Nearest Neighbor)分类器K的最佳值,在K为最佳值时对实时环境下DW-DTW算法与传统动态时间规整算法手势识别率进行了对比,并验证了在光照较暗、光照较强以及复杂背景下该动态手势识别方法的鲁棒性。在实现了动态手势识别的基础上,通过激发鼠标、键盘事件完成了隔空翻书系统的搭建,该系统运行流畅、交互体验感良好。
其他文献
摘要:本文主要选取某市社区年龄在55-65岁范围内的60名老年人作为研究对象,随机分为甲组与乙组各30人,乙组人员先进行1个月网球基础动作训练,之后进行为期6个月、每周三次、每次90分钟的网球专项训练,甲组人员则保持原来生活状态。通过实验对比后,结果显示乙组人员在径向运动、上下运动、旋转运动及左右运动、视觉角度判断率方面,相较于未进行网球运动的老年人提升效果显著。表明适当的网球运动对于提升老年人视
摘要:体育旅游业作为最具活力的朝阳产业之一,是体育产业的重要组成部分,也是旅游业发展的新亮点,具有健身、休闲等多种功效。将文化内涵渗透到冰雪体育旅游业的发展中,能够形成独特的产品属性,积极发挥文化资源优势,促进冰雪体育旅游业整体素质的提升,增强吸引力,注入强劲的发展动力。因此,将文化因素融入冰雪体育旅游业对促进其更好发展有着非常重要的意义。本文从多个方面,就基于文化渗透视域下,促进冰雪体育旅游业发
摘要:田径训练是当前业余训练中较为常见的运动项目,对于高职院校而言,田径训练也是一项不可或缺的运动。在高职高专体育教学过程中,田径训练虽然是一项业余训练课程,但是,从课堂实际反应来看,学生的参与度普遍较高,这在一定程度上不仅达到了锻炼的目的,而且大大提升了学生的身体素质,并能够使其以更饱满的热情投入到实际工作中去。本文结合自身实际教学经验,就高职高专业余田径训练中的运动损伤相关问题,进行简要分析,
摘要:21世纪以来,国家教育局联合对全国学生体质健康状况多次进行调查研究,每次调查结果均显示,学生的体质指标持续呈下降趋势,国家也不断地采取各种有效措施来改善学生的体质状况。在这种背景下,羽毛球作为一项被高职学生喜爱的运动带入到高职学校当中,那么羽毛球训练是否能给高职学生的体质带来积极的影响,成为当下教育界关注的重点,本文就对羽毛球训练对高职学生体质影响展开探究分析。  关键词:羽毛球训练;高职学
随着信息技术的飞速发展,知识经济的大潮迅猛而来。文章从分析知识经济时代的主要特征出发,提出了我国企业为迎接知识经济时代的挑战所应采取的对策
我跟奶奶认识的时候,她已经65岁了,我跟她玩得挺好的. 我俩能玩得好是因为她会讲故事.生于战乱年代的她却认识很多字,记忆力超强,看完的小说和戏都能绘声绘色地讲一遍.她有这
期刊
健美操是高中女生喜爱参加的运动项目,是实现《全民健身计划纲要》的重要途径之一。论文以文献资料法法为理论依据,实验法为数据支撑,用逻辑分析法来构思论文结构,从健美操对
高校党校是高校培养和发展党员的教育主阵地,在新的历史条件下,探求提高其教育的实效性,值得借鉴的有益经验很多,本文试图探讨一种党校教育的思路,提出当前高校党校教育应把
<正>十几岁时,你每天都希望学校的广播不要在5点45分准时响起,因为你不愿起床,不愿和小伙伴们抢同一个狭小的卫生间,更不愿在冷风吹过的操场上浑身战栗地做广播体操。但是,班
“陪我去剪头发吧.” “不去.” “去吧,帮我看看好不好看.” 看到这里,你一定会猜测这是一对关系融洽的闺蜜.如果这么想,那你就大错特错了,这是我妈妈撒娇的场景. 蜡笔小新
期刊