基于深度学习的视频异常行为检测

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:huangweiririri
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
公共场所安全对国家的建设发展具有重要意义。在人们日常生活的公共区域,如:交通十字路口、购物中心、住宅小区等,安装着大量的监控摄像头来进行公共安全监控。因此,如何快速、实时、智能地对视频进行异常事件分析成为计算机视觉领域一个受关注度较高的研究方向。深度学习具有模型容量大、自适应强等特点,并且在图像处理方面硕果累累。本文利用深度学习的相关知识,设计和实现了一个具有良好性能的视频异常行为检测网络。首先本文遵循正常事件是可预测的,而异常事件是不可预测的前提,提出异常检测算法AP-Crev,它通过学习历史帧来预测未来可能会发生的结果,计算预测结果与真实结果的误差来检测异常。AP-Crev在训练阶段使用GAN网络架构,利用无监督的学习方法,针对正常事件进行未来帧的预测,最终获得能够对正常事件准确预测的模型。为了提高未来帧的预测准确性,在AP-Crev中使用Crev Net作为未来帧的预测模块,在Crev Net中使用3D-CNN在时域和空域上对历史帧提取更具代表性的时空特征;通过使用由ST-LSTM组成的RNN结构进行预测结果的选择,它可以计算视频帧在时空维度上的依存关系。实验证明,AP-Crev提高了未来帧预测的准确性,并且在异常检测任务上本文提出的方法也提升了原模型的检测结果。其次,由于现实世界中异常事件稀少,数据集存在正常和异常数据不平衡问题,进而导致异常检测模型在预测未来帧时侧重于对静态背景的预测,而忽略了异常发生的前景区域。本文使用注意力机制构建了异常检测网络AP-Crev-Att,具体来说,首先根据数据集来计算遮罩图,之后在训练时结合遮罩图、背景、光流图构建数据集的注意力图,将注意力图与帧进行计算使背景区域和前景区域具有不同的权值,使得网络在训练时更着重于对于前景区域的预测。实验探讨了不同计算方式得到的注意力图、注意力图对网络优化的影响、注意力图对异常得分的影响、以及AP-Crev-Att在异常检测任务上的能力,结果表明使用注意力机制可以增强网络的异常检测性能。另外,针对特定的室内场景,本文创建了包含真实异常的数据集Indoor,收集了实验室坐位上的监控视频,定义6种异常行为,包括:聊天、摔倒、抛物、转头,低头和平躺。收集到10个异常视频,11个正常视频。通过对收集到的视频数据进行帧截取,筛选和标记等操作建立了用于室内异常训练集和测试集,训练集中包含7763张正常帧,测试集中包含5242张异常帧。
其他文献
随着信息技术的爆发式增长,总线的带宽和速度逐渐成为制约计算机系统发展的关键因素。PCIE(Peripheral Component Interconnect Express)作为第三代高速I/O串行总线,克服了并行总线干扰和同步的问题,它的高速数据传输使其在计算机和通信等领域中有着广泛的发展前景。物理层是PCIE的最底层,媒体访问控制(Media Access Control,MAC)作为物理层的
合成孔径雷达(Synthetic Aperture Radar,SAR)凭借其可以全天时不间断地工作、观测过程中不受气候、光线等影响的优点,在国家防御、军事侦察、林业防护等领域发挥着重要的作用。极化SAR增强了SAR获取目标的性能,其在地物成像时会同时使用多种极化方式,从多个角度获取目标的各种散射性质参数。通过解译分析这些参数,便能获取目标中更多具体的信息。超像素是由图像中特性相似的相邻像素组成的
随着互联网与HTML技术的发展,网络新闻成为新闻传播的主要方式,而网页中的导航栏、广告、备案信息等冗余信息却影响了人们对新闻内容的获取。为了让用户可以获得纯净的新闻内容,就需要对网页内容进行信息抽取,即从包含冗余信息的网页中将主要新闻信息如新闻标题,内容等抽取出来。为了实现这一目标,本文设计了一个Web新闻抽取系统,可以从网页中抽取新闻的主要信息并对抽取的新闻进行分类然后存储在数据库中。对于从新闻
随着信息时代的蓬勃发展,通信技术也在不断的革新,为了满足人们日益提升的通信需求,第五代移动通信系统(5G)应运而生,作为承载物联网和大数据时代的新基建,5G在未来智慧城市的建设中将成为不可或缺的载体。基站天线作为移动通信系统的重要组成部分,负责基站与终端设备之间无线信号的发射与接收。目前商用的5G基站天线主要工作在Sub-6波段,为了克服相对较高的传输损耗和日趋复杂的空间电磁干扰,新一代基站天线采
超快荧光技术被广泛用来研究微观体系的相互作用及动力学过程。通过超快荧光技术可以得到蛋白质水动力学过程中的Stokes位移,而线性响应理论一直被用来诠释Stokes位移和体系平衡态涨落之间的关联,溶液中的Stokes位移遵循线性响应理论。在大部分文献报道中,基态能量面上的自然涨落常常被用来评估荧光谱的非平衡态弛豫过程,然而,本文通过模拟实验研究发现,当体系基态和激发态能量面有所不同时,Stokes位
随着LDPC码作为第五代移动通信系统(5G)增强移动带宽场景下数据信道的编码方案,以及面对新一代移动通信(6G)在需求和技术上所展开的研究工作,都充分说明了无论是在未来空天地一体化的编码方案设计工作中,还是针对目前5G市场的快速推进,与LDPC码作为信道编码方案中所表现出的优异性能是分不开的。针对卫星通信DVB-S2标准中采用LDPC码和BCH码级联的码结构已经具有接近香农限的性能,可是随着卫星通
毫米波雷达因其同时具有较高的距离分辨率与速度分辨率,近些年逐渐走入人们的视野,开始在自动驾驶、智能家居等领域发挥作用。现有的毫米波雷达目标分类方法通过对目标回波进行预处理后获得目标时频图、距离多普勒(Range Doppler,RD)图、切片级点云或其他类型数据后,在不同特征域内提取能够反映目标微动、微距等信息的特征,将特征向量输入到分类器中来完成目标分类。但是,通常情况下目标回波只能反映目标当前
外贸是拉动我国经济增长的"三驾马车"之一,为了促进外贸更好地发展,我国根据国际惯例,出台了一系列的出口退税政策。从目前外贸企业出口退税的情况来看,由于各种各样的原因,这一领域存在很多亟待解决的问题。本文首先对于外贸企业出口退税政策进行了具体的探讨,随后对当前外贸企业出口退税方面的常见问题进行了一一总结,最后围绕本文所谈到的各种问题,结合相关研究成果以及自身的理解,提出了解决外贸企业出口退税问题的策
量子计算相较于经典计算在一些难题上表现出来的高效的计算能力,吸引了许多学者们的关注,迅速成为时下的研究热点。但在量子计算过程中,难以避免会受到量子噪声的干扰,为解决这个问题,量子纠错码技术应运而生。稳定子码是一类广泛应用和研究的量子纠错码,但稳定子码的译码问题一直以来都是个难题,目前比较活跃的研究领域是那些具有代数结构的码,其中,拓扑码独特的编码结构,使其译码问题成为稳定子码中研究的热门对象。神经
与针对自然图像的目标检测技术相比,针对遥感图像的目标检测技术面向的数据、应用领域均有不同。从数据角度,主要针对低空卫星拍摄的大场景遥感图像,拍摄视角为俯视;从应用领域角度,主要应用于军事目标侦测、船只搜救、地图绘制等领域。因此,研究针对遥感图像的目标检测技术有重要意义。本文从现有目标检测技术出发,针对遥感图像目标小、存在密集目标等特点,对现有目标检测技术进行改进,主要贡献如下:(1)提出基于注意力