基于关键帧和注意力残差网络的手语识别算法

来源 :计算机工程 | 被引量 : 0次 | 上传用户:wondercn
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
手语识别的研究对于改善聋哑人生活质量具有重要意义,同时促进着人机交互领域的发展。针对手语视频中存在大量无关帧,手语识别过程中手部细节信息提取不足,难以精确定位手语动作的位置和时间信息导致识别率不高的问题,提出了一种基于关键帧和交互式注意力残差网络的手语识别方法。该方法分为两部分,数据预处理部分提出了基于图像相似度和模糊程度的关键帧提取算法,用于从基于Farneback光流法获取的大量候选关键帧中确定最终的关键帧,减少无关冗余信息。网络部分以3D-ResNet为基础框架,首先构建一种小卷积模块,用来增强网络对手语视频中细粒度特征的提取能力;其次设计一种在捷径分支中采用池化卷积下采样方式的残差结构,减小特征图失真程度;最后提出了一种融合通道注意力和空间注意力的交互式四重注意力模块,强化对目标区域关键特征的提取。在CSL和DEVISIGN数据集上对提出的算法进行了实验验证,结果表明该方法在CSL和DEVISIGN数据集上分别取得了92.0%和92.2%的准确率,均高于其他手语识别方法。
其他文献
目的:探讨加速康复管理(enhanced recovery after surgery, ERAS)模式在腹腔结核患者围手术期护理中的应用价值。方法:回顾性分析2015年1月至2020年12月陕西省结核病防治院结核外科收治的107例腹腔结核手术患者。其中,2015年1月至2018年6月收治的49例腹腔结核患者围手术期应用常规护理,作为对照组;2018年7月至2020年12月收治的58例腹腔结核手术
<正>近年来,临海市立足企业需求,积极探索不动产登记新模式新路径。2017年,临海市在全国率先实行不动产抵押登记与抵押贷款“一窗受理、延伸服务”,变企业群众“多次跑”为窗口“零跑腿”,有力推动了不动产登记提速增效。在此基础上,该市聚焦经济社会发展的新形势新变化,从简化登记流程、压缩工作时限、优化服务方式等方面再发力、再突破,着力解决企业不动产登记过程中存在的难点、痛点,持续提升服务惠企深度和广度,
期刊
期刊
捻转血矛线虫是寄生于反刍动物皱胃的一种常见多发的胃肠道线虫,给全球畜牧业造成了巨大的经济损失。目前,该线虫的防控仍然主要依赖于广谱的驱虫药,其中伊维菌素(Ivermectin,IVM)是最广泛使用的驱虫药之一,为该线虫的防控起了重大的作用。然而,IVM的长期使用而导致抗药性不断加剧,且其十分复杂的抗药机制还未明确。为此,本研究对捻转血矛线虫IVM抗药株和敏感虫株进行抗药性检测,在此基础上,采用转录
目的:建立人血浆伊曲康唑和羟基伊曲康唑浓度的液相色谱-串联质谱法(LC-MS/MS)检测方法,并分析临床应用效果。方法:以含同位素的甲醇为内标,采用蛋白沉淀法对血浆样本进行前处理,并用LC-MS/MS法检测。以Kinetex C18(3 mm×100 mm, 2.6μm)为色谱柱,以水溶液(含0.1%甲酸和5 mmol/L乙酸铵)-乙腈(含0.1%甲酸)为流动相进行梯度洗脱,流速0.6 mL/mi
教育是国之大计、党之大计。全面推进“课程思政”建设,发挥好每门课程的育人功能,提高学生的培养质量,是深入贯彻落实习近平总书记关于教育的重要论述和全国教育大会精神的重要举措。近年来,与“课程思政”相关的理论与实践研究更多聚焦在我国高等教育阶段,并取得一定的成效,涉及中学阶段的研究相对较少。高中阶段衔接义务教育和高等教育,是人才成长与培养的关键时期。物理学是自然科学中的基础学科,蕴含着丰富的思政资源,
主题语境性是《义务教育英语课程标准(2022年版)》中的重要课程内容思想,它是学生发展核心素养培养的跨学科性的体现。基于内容的语言教学理念与其具有相似性,能为基于新课标的英语教学提供启示。基于内容的语言教学模式是一个连续体,其中一端为语言驱动端,项目为基于主题的语言课程项目,另一端为内容驱动端,项目为语言浸入式,中间部分为内容和语言整合端,项目为内容和语言整合的学习。研究表明,相较于非此类项目的学
基于2002—2018年745个县域面板数据,在引入中间投入的基础上,研究农业资源错配对全要素生产率的影响,再利用固定效应模型分析农业资源错配影响因素。结果表明,总体上看,改善农业资源错配可以提升50.21%~55.81%的全要素生产率,农业资源错配及其造成的全要素生产率损失在研究区间内均有所增加。进一步研究发现,提高财政支出比例、推进卫生基础设施建设以及加快农业机械化有利于改善农业资源错配。基于
近年来,肺癌依旧是损害人们生命健康的主要元凶之一。高发病率和低治愈率成为肺癌患者面临的严重问题之一。肺腺癌(Lung adenocarcinoma cancer,LAC)约占肺癌病例的一半以上,是非小细胞肺癌(Non-Small-Cell Lung Cancer,NSCLC)的一种重要的病理亚型。由于NSCLC起病更加隐蔽,早期症状缺乏特异性,确诊的NSCLC患者即为进展期肺癌,已经迁移至其它部位