基于深度卷积神经网络的动态手势识别方法设计与实现

来源 :郑州大学 | 被引量 : 0次 | 上传用户:qgz111
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着科学技术的发展,机器人、智能可穿戴设备等人机交互设备正逐渐走入人们的日常生活,为我们的工作、学习、生活提供了诸多便利。在人机交互过程中,提升人机交互与协作的实用性、便捷性和安全性成为研究人员广泛关注的问题。手势作为一种无声的语言具有自然、直接、富有表现力的特点,但手部运动的高自由度与复杂的环境变化对动态手势快速且准确的识别提出了更高的要求。因此,本文主要从响应速度和识别准确率两方面开展基于深度卷积神经网络的动态手势识别方法设计与实现。本文的主要内容如下:首先,为了实现动态手势的快速识别,利用肌电信号数据量小、计算效率高的特点,建立了基于谱分析的动态手势识别方法。设计了基于谱分析的肌电信号预处理算法,通过时频域转换将多通道时间序列信号转换至二维图像,在去除各通道干扰信息的同时完成了对于肌电信号的时频域信息以及通道间空间信息获取,在此基础上,设计了轻量化的卷积神经网络,实现对动态手势的快速预测。其次,针对肌电信号表征能力弱,无法有效地应对复杂多样的动态手势,导致识别精度差的问题,构建了多特征融合的动态手势识别框架,实现动态手势的准确识别。设计了 AlexNet2视频图像特征描述子,实现动态手势的时空特征表征。同时,结合人工特征和深度特征不同的表征能力,设计了基于支持向量机的双分支识别模型,以获取不同特征的预测概率。最后,设计了基于Dempster Shafer证据理论的融合算法,实现低级图像特征和高级深度特征的决策级融合,有效地提高了动态手势识别的准确率与鲁棒性。最后,针对多特征融合算法中存在的模型复杂、计算效率低的问题,研究了基于时空注意力机制的分类模型,实现端到端的动态手势识别。基于3D卷积神经网络在三维数据表征的优势,搭建了基于3D深度残差分类网络,同时,设计了时间注意力和空间注意力模块,构建基于注意力的3D深度残差分类模型,以获取有鉴别性的时空语义特征,使分类网络更注重于目标区域的表征。实验结果表明,所设计的方法能够很好地实现动态手势快速、准确的识别。
其他文献
WC-Co硬质合金具有高硬度、高耐磨性和低热膨胀系数等优点,广泛应用于矿山开采、精密加工及耐磨密封件等领域。然而钴是一种稀缺的战略金属资源,价格昂贵,限制了WC硬质合金的发展和应用。中熵合金具有高韧性、高耐蚀性和高温稳定性等优异的力学性能,并且具有明显的成本优势,在硬质合金粘结剂领域具有广阔的应用前景。放电等离子烧结是一种全新的粉末冶金技术,具有升温快、烧结效率高、节能环保等特点。因此,以中熵合金
学位
氧化铝陶瓷是工业生产中最常用的一种高性能陶瓷,然而氧化铝陶瓷存在烧结温度高、烧结时间长、晶粒异常长大等缺点。闪烧是2010年由R.Raj教授提出的一种新型陶瓷烧结工艺,通过在生坯两端施加电场(高电场低电流),在较低的炉温下实现生坯的快速致密化。闪烧具有烧结温度低、烧结时间短、能耗低等优点。针对上述问题本文利用梯度电流闪烧技术解决氧化铝陶瓷难烧结、晶粒异常长大等难题,对氧化铝陶瓷产业发展有积极意义。
学位
传统的推荐系统中存在的用户-物品交互的稀疏性和冷启动问题,会导致推荐的效果不理想,因此众多学者尝试在推荐系统中添加辅助信息来改善推荐的性能。知识图谱作为一类辅助信息被应用于推荐系统中可以有效地缓解以上问题,并且能够提高推荐的准确性、多样性和可解释性。因此,近年来基于知识图谱的推荐算法受到了众多学者的广泛关注。推荐系统中有两个重要的主体分别为用户和物品。知识图谱中包含着丰富的知识信息,可用于表征用户
学位
在大数据时代,各种商业APP、平台对于个人信息的搜集套取无孔不入,政府部门掌控的个人信息不慎泄露,让人们不堪其扰,甚至还面临财产、人身安全等各种潜在风险。因此,个人信息的保护就显得尤为重要,法律无疑是个人信息保护最主要的方式。《个人信息保护法》沿袭《民法典》对个人信息保护的内容,以个人信息权益形式进行规定,同时对个人信息的范围进行了扩大,明确指出信息主体所享有的信息权利,并对知情同意进行了详细的规
学位
目前,废弃泥浆主要包括河道疏浚泥浆和工业废弃泥浆,其年产量巨大,直接排放既污染了环境,又浪费了水资源,不符合绿色环保的要求,但对其如何合理、有效利用一直是个技术难题。而大部分废弃泥浆有着低渗透性、高压缩性的特点。对于这类泥浆,为便于运输,减小其体积即泥水分离成为了研究的关键要点。电渗法在处理高压缩性、低渗透性泥浆的过程中有着高效、环保等特点。但在电渗法理论与实践的结合中,有很多不确定性因素,其中电
学位
学位
镁合金具有良好的生物相容性和生物可降解性,因此成为较为理想的可降解血管支架用材料。然而镁合金血管植入材料在服役过程中会受到由血管壁收缩舒张产生的周期性径向力和生理介质环境的共同影响,由此导致的应力集中和腐蚀疲劳是其力学性能恶化和植入器件失效的主要原因。因此,通过合理的变形加工和热处理等手段对镁合金的微观组织进行调控,分别研究显微组织、应力环境、和腐蚀介质对镁合金腐蚀疲劳行为的影响,对推动血管支架用
学位
铟镓锌氧化物(IGZO)是一种具有代表性的透明金属氧化物半导体材料,禁带宽度在3.5e V左右,属于N型半导体,具有较高的电子迁移率、优异的光学性能和电学性能,被广泛应用在有源矩阵有机发光二极体面板(AMOLED)、液晶显示器(LCD)、柔性显示、电子纸等领域。IGZO粉末作为平板显示用IGZO靶材的原料粉,对其性能要求极高。获得高质量的原料粉体是制备高性能IGZO靶材的一个重要工序。通过制备和研
学位
经济和环境问题一直以来都是人们关注的焦点。随着科技水平和社会生产力的发展,社会经济快速发展也带来了多种环境问题。2019年习总书记将黄河流域的生态保护和高质量发展作为国家重大战略,平衡好环境保护和经济发展,使二者协同发展、共同进步便显得尤为重要。作为处在黄河流域城市群之一的中原城市群,有便利的交通和良好的生态环境,具有贯穿南北、承东启西的作用。本文以中原城市群为研究对象,对环境—经济系统的协同性发
学位
股票趋势预测是投资者获得超额收益的基本需求,学术界和工业界对它的探索从未停止过,人们已经开发了许多方法来尝试预测股票未来趋势。然而,现实的股票市场是非常复杂且时变的,这导致传统方法对其进行精准预测极其困难。随着深度学习的突破性进展,其中专门解决时序问题的长短期记忆网络(LSTM)成为股票预测普遍使用的工具之一。然而,LSTM模型易出现弱泛化现象。为了探索更有效的预测模型,本文提出时序图注意力网络(
学位