基于注意力机制、多核卷积LSTM的动作识别算法研究

来源 :武汉纺织大学 | 被引量 : 0次 | 上传用户:mecdull
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着云计算和边缘计算在国内互联网产业的飞速发展,人们已经习惯在社交平台和摄像机下生活。同时,在智能监控和智慧交通以及时下最流行的网络短视频等领域也生产了大量的视频数据。如何更好的理解视频中丰富的行为信息从而为后续广泛的应用提供决策辅助也成为了一个重要的研究课题。相比于图像任务的学习,视频的本质更具有时空性。本文针对如何有效获取视频里的时空信息以及如何解决视频信息的长时间依赖问题,从以下两个角度出发进行了动作识别方法的研究。(1)提出了一种融合注意力机制的动作识别方法。该方法旨在有效地在一个统一的2D CNN框架中对时空和运动特征进行编码。首先提出了一个融入注意力机制的“时空-运动”模块,它包含一个通道式时空聚合模块来提取时空特征和一个通道式运动激励模块来有效编码运动特征。然后用“时空-运动”模块取代Res Net架构中的原始残差块,最终构成了本文的动作识别网络。(2)提出了一种基于多核卷积LSTM网络的动作识别方法。本文首先确定了卷积核大小与卷积LSTM网络中时空建模的关系,因此提出用一组不同维度的卷积核序列来取代多输出通道的单个卷积核。然后通过一个额外的卷积层来整合其多核输出,最终构成的动作识别网络可以对视频进行高效而准确的分类。为了验证本文所提出的两种动作识别方法的可行性,本文在公开数据集UCF101、HMDB51、Something-Something V1以及Sports-1M上进行了多组对比及验证实验。实验结果表明,本文提出的两种方法都可以有效地提高动作识别精度。
其他文献
高脂血症是一种脂质代谢异常引起的慢性疾病,与心血管疾病的发生紧密相关。随着经济快速增长、人们生活水平的提高,高脂血症发病率逐年增加。本文对高脂血症的相关研究进行总结,阐述了高脂血症的发病情况,遗传因素、营养因素、全身性疾病及肠道菌群对高脂血症的影响机制,西药的治疗特点、机制以及中医药对高脂血症的干预治疗作用,以期为相关研究提供参考。
<正>近年来,环境污染问题一直是人们所关注的重点问题之一。由于对环境保护的重视度逐渐提高,近些年来我国一切大中城市的环境质量已经得到明显的改善,但是值得注意的是当前的一些环境污染问题仍然存在,针对环境保护的措施应当进一步加强。我国所面临的水污染问题还较为严重,在我国大多数城市的河流中,都存在着较为严重的有机污染的情况,这使得城市的水源的质量进一步下降;近年来由于煤炭消耗量的不断增加,导致空气当中二
期刊
<正>国际货代行业由于进入门槛低、市场竞争主体众多,随着市场逐步完全放开,众多国际知名货代企业全面布局中国,激烈的市场竞争给我国数量众多的中小型货代企业的发展造成了极大的压力,生存状况甚忧。国际环境对于国际贸易产业链带来的冲击和机遇,通过分析我国中小型货运代理企业现状,并据此提出了我国国际货运代理企业发展的新思路。一、前言国际货运代理行业是我国对外贸易飞速发展中的重要桥梁,是承启货主、承运人等各方
期刊
教师评价改革是引发教育领域改革与创新发展的重要因素,在数智融合背景下,利用多种技术介入高校教师评价能够有效地驱动高校教师评价变革。基于此,文章首先分析了高校教师评价在师德、教学、科研方面面临的难题,提出数智融合驱动高校教师评价改革的理念。随后,文章从结果评价、过程评价、综合评价的角度,阐述了数智融合驱动高校教师评价改革的内在逻辑,并设计了包含师德评价、教学评价、科研评价的数智融合驱动高校教师评价改
茯苓是一种临床常用中药材,该研究前期从茯苓中分离出1个多糖成分PCP-I,由半乳糖、甘露糖、岩藻糖和葡萄糖组成。PCP-I对H1N1流感疫苗、乙肝疫苗和炭疽疫苗均显示出良好的疫苗佐剂活性,效果优于铝佐剂,但其化学结构尚不清楚。该文拟采用弱酸水解得到PCP-I的主骨架寡糖,继而采用高碘酸氧化、Smith降解和甲基化反应,再结合IR、NMR和GC-MS等技术,对PCP-I和水解寡糖PCP-I-hy-1
<正>西方国家在生态建设、环保理念等方面很先进,如瑞典、德国、英国等国家的国民都较重视环境保护,生态保护已融入这些国家的国民意识、社会文化之中,成为像衣食住行一样的行为习惯。但是我国在生态教育方面做得还稍差,乱扔垃圾、随地吐痰、过度消费等生态意识缺失问题仍存在。所以在生态教育中迫切需要一些介绍西方国家生态理念、国民环保意识的书籍,田耀的《生态环境英语阅读》就是这样的优质图书。
期刊
在小学数学教学中渗透劳动教育可以提高学生的劳动素养,将学生培养成为德智体美劳全面发展的新时代优秀人才.本文通过论述小学数学教学中渗透劳动教育的意义、现状、策略,希望可以为小学数学教学渗透劳动教育的实践提供理论支持,为教育改革尽微薄之力.
随着智能电网的兴起,大规模的可再生能源发电设备和电动汽车充电桩接入电网中,电力负荷同时受到多种复杂因素的影响,呈现随机性、非线性和时序性等特点,提高短期负荷预测的准确性成为一项具有挑战性的任务。近年来基于深度神经网络的智能预测算法成为短期负荷预测的研究热点。卷积神经网络(CNN)能够深入挖掘复杂数据特征,长短期记忆网络(LSTM)具有时间序列学习能力。本文基于CNN-LSTM的混合短期负荷预测模型