基于深度学习的视频动作识别研究

来源 :南京大学 | 被引量 : 0次 | 上传用户:fbrjsdlf
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网技术和多媒体技术的发展,视频在人们生活中的应用场景越来越广泛。随之而来的,不加监管,肆意传播的不良视频内容也会对大众尤其是青少年产生恶劣的影响。因此,对于视频内容的甄别具有重要的社会意义和研究价值。近年来,由于基于深度神经网络的深度学习技术取得突破性进展,深度学习成为处理视频语义分析的主要手段。另一方面,由于新一代高效率视频编码技术HEVC的发展,对视频的压缩可以在达到更高压缩率的同时保留更多的视频信息。基于此,本文以深度神经网络为基础,提出了一种基于视频HEVC压缩域信息的视频内容识别方法。本文首先回顾了近年来视频语义分析的相关研究,然后介绍了深度神经网络模型相关技术,为之后该技术的运用奠定理论基础。针对基于深度学习的视频动作识别研究,本文主要做了两个方面的工作。在视频的非压缩域,研究了几种常用的识别方法。包括基于单帧图像的二维卷积网络、基于多帧融合的三维卷积网络、递归神经网络和基于光流信息的双流神经网络。对模型的理论研究和仿真实现结果表明,基于光流的双流神经网络手动提取光流表征视频的时域信息,并将时空域上的分类结果进行融合,取得了最佳的分类效果。在视频的压缩域,在了解HEVC的基本结构和关键技术的基础上,提取帧间运动矢量表征视频的运动信息。在此基础上,使用矢量中值滤波方法滤除运动矢量中的噪声,使用RANSAC算法对全局运动模型进行拟合,并对运动矢量进行运动补偿。最后使用双流神经网络对处理后的运动矢量进行学习,最终生成的视频动作识别模型取得了预期的识别效果。论文的最后分析总结了本文的工作,对后续的研究方向和要点进行了展望。
其他文献
中华传统伦理对于当代大学生成长成才的重要性不言而喻,这是因为重构后的中华传统伦理对于当代大学生道德品行的培养和树立有着重要的导向作用,是大学生内外兼修所依赖的重要
该文提出了一种基于Benders分解法的优化算法,将电力市场下的长期发输电联合检修计划问题分解为多目标整数规划和随机规划两大问题进行分散协调,利用改进的隐枚举法和基于直
屋顶绿化与地面其它绿化形式一样.都存在着有害生物(病、虫及杂革)的威胁。本文列举了北京屋顶绿化中发现和常见的主要有害生物.记述了种类识别,形态特征、发生时期及防治方法。
人口是城镇化存在的最基本要素,也是城镇化发展的最基本特征。本文主要从国家、省级、市级三个层面,分析了人口年龄结构、流动结构、地域结构等特征,并对人口集聚与经济发展
目的探讨应用腹腔镜下肠粘连松解术治疗粘连性肠梗阻的效果。方法选取2018年2月-2019年3月我院收治的粘连性肠梗阻患者68例为研究对象,根据就诊顺序分为对照组与观察组各34例
目的分析血清α-L-岩藻糖苷酶(AFU)、高尔基体蛋白73(GP73)、甲胎蛋白(AFP)联合检测诊断原发性肝癌的价值。方法选取2017年3月至2019年1月在本院进行检查的35例原发性肝癌患
营养保水剂在万寿菊育苗中的应用试验显示,本保水剂能够节约万寿菊幼苗生长期间灌溉水量,促进万寿菊提早出苗,提高万寿菊幼苗的抗旱能力,促进万寿菊根系发育,使幼苗长势健壮,但保水
大学生在校期间良好道德品质的养成,是合格人才培养不可缺少的重要一环,也是高校精神文明建设的重要组成部分。而良好道德品质养成是多方面因素综合作用的结果,如个人的努力
地质构造控制着煤层瓦斯的赋存,造成了矿井瓦斯分布的不均一性。在分析潘集矿区13-1煤层瓦斯地质资料的基础上,利用煤层底板等高线图反映的地质构造信息,在煤层瓦斯含量测试
近十年来,植物抗病分子机制研究取得显著进展。综述了植物抗病基因的克隆及其结构分析、病原菌无毒基因及其相关致病因子的克隆与研究、信号传导相关因子的克隆及其结构分析