基于Kinect的手语识别技术在聋哑教学中的应用研究

来源 :西南交通大学 | 被引量 : 0次 | 上传用户:QQ403402618
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
手语是聋哑人与其他人沟通的主要工具,应用手语识别技术使计算机能够理解并翻译读取的手语,帮助聋哑人与健全人沟通更加方便快捷。并且,随着体感技术的发展,使计算机更加容易理解人们动作,为手语识别技术的研究提供了新的方法与途径。由于传统的输入设备不能很好的满足人们对人机交互的要求。因此研究手语识别技术,不仅使聋哑人更加容易与健全人进行交流,同时有助于人机交互技术的发展。本课题以聋哑学校教学需求为背景,在对传统的手语识别方法进行了深入研究的基础上,基于Kinect体感摄像机,对手语的特征提取方法和识别算法进行了改进,并实现了手语识别系统。本系统包含动态手语识别和静态手语识别部分,其中,动态手语识别包含手掌运动的手语识别和手指运动的手语识别。通过手语识别系统将手语进行翻译,并用人们理解的词语表达出来,提供聋哑学生与不懂手语的健全人沟通的途径,获得更多的学习资源,从而提高聋哑学生的教学质量。同时为改进教师与电脑的交互方式等研究奠定了很好的基础。本文首先介绍了手语识别的背景和意义,并阐述了国内外的研究现状。接下来介绍了常用的特征提取和手语识别算法及与本文相关的技术和平台,同时阐释了将手语识别系统应用于聋哑儿童教育的理论支持。然后对手部特征提取和检测方法做了详细的描述。在动态手语的特征提取部分,针对Kinect独有的特点提出了手掌运动二次特征提取、手指运动变化深度直方图的方法。在静态手语特征提取部分,使用了手部的的Freeman链码,并对其进行了归一化和旋转不变性的处理。针对动态手语的手掌运动识别,提出了双层HMM模型,针对动态手语中手指运动的识别提出了改进的SVM/HMM模型,静态手语的识别使用了SVM算法。最后,将以上方法进行验证,同时给出了系统的设计和编码实现。
其他文献
中小企业是我国国民经济和社会发展的重要力量。缓解中小企业融资难问题,是促进中小企业健康发展的关键所在。本文通过分别建立中小企业、商业银行和管理方的两方与三方博弈
当前,船舶工业正迈入以智能制造为标志的新时代,原有的基于传统供应链风险管理的模式与方法已难以适应日益复杂的造船供应链系统。本论文通过总结船舶行业的特性以及造船供应链
中压异步电动机具有良好的技术和经济性能,已经广泛应用于矿山、冶金、化工、能源、环保等领域,并成为这些领域的核心驱动设备。随着材料性能和工艺水平的不断提升,以及电机精细化设计的不断深入,中压异步电动机的功率密度也随之提高,这对提高系统和机组的经济性十分有益。但是中压异步电动机功率密度的提高,将使电机的损耗密度增大,对电机的冷却产生不利影响。若电机冷却设计不合适,将使电机的温升过高,影响电机安全运行,
存款保险制度自建立以来,为保障存款人利益、维护金融稳定做了突出的贡献。近年来,我国已将存款保险制度作为金融改革的配套制度提上日程。但存款保险制度最大的弊端在于道德
目的研究下腹部矩形全厚皮片较好的切取方法。方法分别以对折线法和对角线法切取下腹部全厚皮片,对比两者的术后并发症,腹部术后创口外形及创口长度。结果两组患者下腹部创口
本文采用水相悬浮接枝法对低密度聚乙烯(LDPE)进行了接枝改性,所用引发剂·为过氧化苯甲酰(BPO),溶胀剂为甲苯,表面活性剂为op-10,接枝单体为丙烯酸(AA),通过调节接枝工艺条
构建超越"民族存在"思维的欧洲,乃是库尔提乌斯孜孜以求的宗旨。他始终坚持从超民族层面看待文学文化。然而,他的这一思想遭到受纳粹意识形态影响的尧斯等人的激烈抨击。面对
近年来随着我国金融市场的发展,各家商业银行将发展重点放在债券业务规模的扩大,债券业务单笔交易及总成交规模涉及金额巨大,如果存在如操作风险、监管套利等行为,但是由于相
中国是农业大国,也是秸秆资源最为丰富的国家之一,随着社会的发展,农业主产区秸秆大量过剩问题日益突出,农民就地焚烧秸秆带来的资源浪费和环境污染问题,引起了全社会的关注。如何
经过2年松乳菇共生型食用菌的驯化探讨,通过野生松乳菇采集、组织分离培养,借鉴于其它食用菌的配方,找出适合松乳菇生长的人工培养基。设计4个原种培养基配方,以配方1最佳。