基于RealSense的手语手势识别系统开发

来源 :黑龙江大学 | 被引量 : 1次 | 上传用户:L_grey
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着当代计算机视觉技术的迅速发展,人机交互方式已然成为各行各业的新趋势,手语手势是最原始的交流方式,其识别的交互作用具有很高的研究价值,对于帮助聋哑人群体融入正常的社会生活有着非常重要的意义。目前,对手语手势识别的研究主要利用RGB摄像头以及数据手套,然而数据手套的成本相对较高,穿戴不便,很难于生活中大量应用。随着Kinect、RealSense这些3D摄像头的出现,基于视觉上的手语手势识别随之有着更大的发展前景,成为当今热门研究之一。本文以Intel的RealSense3D摄像头进行手语手势视频图像的采集,利用深度信息和肤色检测融合的手部分割方法进行相关采集处理,此方法可有效减少复杂背景和光照等条件影响。然后分别对静态手语手势识别和动态的手语手势识别进行了研究。在对静态手语手势识别研究过程中,对采集分割后的手语手势图像进行了相对应的图像预处理,其中包括中值滤波、手势边缘轮廓提取。中值滤波经实验采取9*9窗口的模板进行滤波去噪,手语手势的边缘轮廓提取采用了Canny算子。然后采取了一种融合了圆形度、矩形度和长宽比的Hu矩特征的提取方法,并通过SVM和BP分类识别算法对不同特征的静态手语手势进行分类识别,结果发现SVM算法在本文中识别效果最好。在动态的手语手势识别研究中,采用结合了Kalman滤波改进的KCF算法应用于手部跟踪,然后利用融合手型和运动轨迹的特征方法,手型的特征提取采用静态手语手势的方法,然后结合改进的DTW算法进行动态手语手势的识别,最后利用VS2017、Open CV、Qt进行了手语手势识别系统的设计实现,并对其功能进行实验测试。通过实验验证以及系统的测试,系统完成对数字1-10和30个手语手势词的识别,经实验测试其平均识别率达90.1%,平均耗时0.23s,满足实时性效果要求。
其他文献
碳纤维增强复合材料(Carbon Fiber Reinforced Polymer,CFRP)以其比强度高、比模量大、抗疲劳等优异的性能在航空航天、石油化工、风力发电、汽车、船舶以及军事工业等领域得到广泛应用,CFRP层板但在其制备、使用过程中,常因为制备工艺与使用环境影响,产生分层、脱粘、孔隙、纤维断裂等多种缺陷与损伤。这些损伤将极大影响了碳纤维复合材料的性能与寿命。扫描红外热波成像无损检测技术
本课题对某一酱香型白酒(命名为DQ)的基酒、轮次酒、成品酒的微量成分进行测定,结合香气活度值确定主体香气成分,与其它酱、清、浓、馥郁、芝麻香型白酒进行统计分析,以确定DQ酱香型白酒的特点。主要研究内容如下:采用气相色谱质谱法、气相色谱法、液相色谱法、超高效液相色谱结合高分辨质谱法对酒中挥发性物质、不挥发性物质及不易挥发性未知成分进行检测,挥发性物质中定性定量了16种酯类、15种醇类、9种醛类、18
近年来,随着数字技术的高速发展,由角色扮演类游戏改编而来的影视剧作为新的影视剧类型在国内引起高度关注并迅速兴起。自2005年国内首部由角色扮演类游戏改编的影视剧《仙剑奇侠传》诞生后,引发了国产游戏改编剧热。继而又成功推出了“仙剑”系列、“轩辕剑”系列以及“古剑奇谭”系列此类的影视剧。这股游戏改编热潮一方面说明了角色扮演类游戏在影视改编上具有广阔的发展空间与前景,从另一方面也说明角色扮演类游戏能为影
随着中国学者的学术理论水平不断提升,他们越来越希望能够在国外出版学术著作,以此展现个人学术成果,与国外学者展开学术交流,共同促进学术发展。在这一背景下,学术类文本的翻译工作也变得更加重要。在本文中,笔者通过对《全球城市》图书英译项目进行案例分析,探讨译者在翻译学术文本时可能会遇到的难点以及相应的解决策略。具体来说,《全球城市》作为一本社科类专著,具有以下翻译难点:术语丰富,专业性强;表达模糊,语意
“发展现代化海洋牧场”、“加强海洋牧场科技研发”是优化海洋生态环境的重要举措,也是实现渔业转型升级、推动渔业供给侧改革的有效途径。目前我国海洋牧场监测监控技术尚
城镇化和产业高级化既是经济社会发展的必然趋势,又是国家现代化的重要内容和主要驱动力量,产城能否协调发展关系到生态文明建设。目前我国城镇化发展发展水平不高,产业的支撑力不足,城镇化与产业发展不协调。鉴于此,国家颁布相关文件高度重视城镇化与产业协调发展。在这一背景下,新型城镇化与产业协调发展渐渐成为我国区域发展研究的核心问题之一,成为现代城市管理需要解决的重要课题之一。因此,本文以新型城镇化试点省份安
传统无线接入网络采用以设备为中心的人工运维模式,在面对未来海量设备接入和快速变化的业务需求时,缺乏高效、敏捷的应对方法。为提升无线接入网络的智慧能力,降低运维成本和人力开支,意图驱动无线接入网络(Intent-Driven Radio Access Network,ID-RAN)应运而生。ID-RAN融合人工智能、网络功能虚拟化等技术,可将用户意图直接转换为网络配置策略,并自动进行系统性能预估和配
随着芯片上单位面积内集成的晶体管数目成倍的增长,常规的冷却方式已经不能满足大功率芯片器件的散热需求,因此寻求高效的散热装置和散热介质已经成为业界的发展重点。微通道具有占用空间小,散热效率高以及可与芯片集成加工等优点,而新型的换热工质纳米流体具有良好的换热效果。因此将纳米流体与微通道技术结合,是解决高热流、高集成芯片器件新型热管理的良好途径。本文主要将蛇形微通道与水基氧化铝纳米流体结合,并对其流动散
敬业是中华民族优秀的职业道德文化传统,也是推进社会主义现代化建设的重要价值追求。中国特色社会主义进入新时代,社会主义敬业观上升为社会主义核心价值观。青年兴则国家兴,青年强则国家强,新时代大学生作为青年群体的一部分,是国家和民族的未来与希望,是社会发展进步的中坚力量。开展大学生社会主义敬业观教育是培养有理想、有本领、有担当的社会主义现代化事业建设者和接班人的历史使命,关系到国家发展和民族复兴。因此,
随着社会的快速发展进步,人们的物质条件日益改善,大众精神层面的需求开始受到注重,博物馆作为文化和艺术的高浓度聚集地因而热度越来越高。人们对艺术展的热情高涨,而观展者并非仅限于相关专业人员,普通大众也有陶冶情操,补充文化知识的需求,因而展览作品的解说文本的作用显而易见。而尤其是那些慕名而来的非中文母语的看展者,在缺乏相当的文化背景知识的情况下,介绍类文本的英译质量对于他们的观展体验就更为至关重要了。