基于深度学习的监控图像小目标检测关键技术研究与实现

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:voodoochildzm
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
分类、定位、检测、分割是计算机视觉领域最核心的任务。近年来,卷积神经网络(CNNs)技术取得了瞩目的成就,促进了目标检测技术飞速发展,越来越成为人类生活的便捷工具,在智能安防、智慧医疗、自动驾驶等领域广泛应用。尽管基于深度学习的目标检测取得长足进步,但在检测不同大小的物体存在相当大的性能差异。小目标物体由于自身尺度问题,存在被遮挡,特征不明显等问题,导致小目标难以检测。因此,小目标检测的研究也逐渐成为目标检测领域最热门的方向之一。尤其在现实生活中,检测小目标物体具有实际意义。为了解决小目标检测中存在的问题,并与实际应用相结合。本文从特征生成、特征提取、特征融合三个方面,以目标检测Baseline网络Faster R-CNN算法为基础改进了特征提取和特征融合网络,提出了新的检测算法Res2AMSRNet,并使用公开数据集MS COCO2017进行对比实验,证明了网络模型良好的性能,最后将所设计的网络模型应用到监控图像下的手机(小目标)检测中。本文的主要工作如下:1.本文基于分层多尺度提取特征的方法提出了一种新的特征提取网络,其融合了多尺度、上下文信息以及全局空间注意力的思想。该网络从更细粒度的角度来表示多尺度特征,通过叠加的卷积层以及上下文捕获结构来增加网络层的感受野范围,从而提升小目标特征获取的能力。全局空间上下文注意力方法则是为网络提取特征时给与空间全局位置信息更多关注。在MS COCO 2017数据集上的实验结果表明,本文提出的结合上下文捕获与空间全局注意力方法的Res2AMNet网络相比于主流的特征提取网络在APs(Average Precision Small)指标上提升了大约1%~7%。2.为了更好地融合特征,本文在FPN的基础上,结合感受野扩大、超分辨率、局部位置注意力等方法,设计了一种新的超分辨率特征金字塔网络(SRFPN),实现在不损失特征图分辨率的情况下,获得了更大的感受野、更丰富的特征以及更精确的局部位置信息。同时,本文分析了MS COCO 2017数据集的目标分布情况,针对图像中小目标数量与特征较少的问题,通过数据增强等方法有效增加了小目标的样本数量,丰富了目标检测网络提取到的小目标特征,进一步提升了小目标检测的精度。在MS COCO 2017数据集上的实验结果表明,本文结合了Res2AMNet骨干网络、SRFPN特征融合网络与数据增强方法的目标检测网络(Res2AMSRNet)在APs指标上达到了25.9%。3.从实际应用角度出发,本文提出两个针对手机检测的数据集,其中一个作为手机检测的挑战数据集(MP 2020),另一个数据集是则是只针对监控图像中手机的数据集(MPUM),主要是用来测试方法的性能。本文将结合了Res2AMNet、SRFPN的Faster R-CNN网络命名为Res2AMSRNet。为了证明本文网络的优越性,在公开数据集与本文提出的数据集上,与目前主流的目标检测方法进行了大量对比试验。同时为了解决监控图像中手机检测数据匮乏与分布的问题,本文提出结合了迁移学习,主要针对监控图像中手机检测结合域适应迁移的方法,并与预训练模型微调的迁移方法进行了对比试验,证明了本文提出的域适应方法的有效性。
其他文献
容器是近年来出现的一种虚拟化技术,广泛应用于云计算领域,它极大的方便了云计算应用的部署,越来越多的应用转向了使用容器开发与部署。在众多容器编排管理工具中,Kubernetes正在成为一种事实的标准,它提供了一套集群自恢复机制,包括容器的自动重启、自动调度以及自动备份等。但是,Kubernetes的缺省调度器依赖于应用属主提供的资源分配需求,没有考虑实时资源的使用情况。并且随着多集群架构的应用,通常
随着互联网时代的来临,在线对弈类游戏已经融入到了全世界人民的娱乐生活中。棋牌类游戏凭借其简单的操作、丰富的策略性、较快的游戏节奏等特点,在传统线上平台上快速发展,获得了大批忠实的玩家群众。线上对弈,寓教于乐,在当前疫情阶段,得到快速发展。本课题基于真实的项目需求,为国际象棋类教学活动设计一个在线多人对弈系统。基于此,本文设计并实现了一款云平台下的棋类对弈系统,为全球棋类游戏玩家提供一个跨平台的对弈
随着互联网和物联网的高速发展,新的业务场景层出不穷,云计算和边缘计算技术应运而生。一方面,云计算技术为用户访问互联网上海量计算资源提供了便利。普通用户不需要了解集群的内部原理,也不需要具备计算机专业背景知识,即可轻松获取大量云端资源。另一方面,云计算技术高延迟、高能耗的缺点限制了它的使用场景,而边缘计算将资源部署至更加靠近用户的边缘端,具有网络延迟低、宽带需求低等优势,可以适应智能家居、数字医疗、
深度模型性能提升的同时,模型参数增加、内存使用资源增加、训练时间过长、计算量过大等问题接踵而至。这些问题使得嵌入式设备、集成设备等资源受限机器无法正常使用,从而影响深度学习的应用推广。在此背景和市场需求下,针对模型压缩方法的研究具有重要意义,知识蒸馏是一种近几年来被广泛关注的模型轻量化方法,学生模型通过模仿教师模型进行训练。学生网络模型在教师网络模型的指导下,可以更好地学习数据集中的结构化知识。基
近年来,电力系统自动化、信息化及智能化发展水平显著提升,许多新技术应用到传统电力系统中。轨道交通电力数据采集与监视控制(Supervisory Control And Data Acquisition,SCADA)系统和其他电力系统类似,有着强烈的稳定性、容错性和可靠性需求。恰逢成都轨道交通电力SCADA系统智慧维保科研项目立项,本文借此契机以轨道交通电力SCADA系统的状态估计功能作为出发点,改
随着容器技术和Kubernetes的兴起,全球众多的云厂商纷纷推出属于自己的容器云服务。容器技术的浪潮从Docker的普及开始,直到Kubernetes的逐渐成熟才真正的落地,才开始真正实现从传统的应用部署管理模式向容器服务模式转变。2020双11期间,阿里已经将80%的核心业务部署到容器云平台当中,Google更是已经在生产环境当中积累了数十年的容器服务经验,而Kubernetes正是其开源的容
近年来,网络安全问题不断增加,这导致了网络的控制和管理面临越发严峻的形势。为了应对网络不安全因素的威胁,网络管理人员亟需一种有效的手段来加强对网络的安全控制和管理。网络脆弱性分析是预防网络攻击发生方法的重要一环,能够帮助网络管理人员建立完备有效的网络控制和管理机制,同时也是网络科学领域的研究热点问题之一。网络中的高风险节点指在网络中影响力高,但防御力低的节点,这些节点是造成网络脆弱的重要因素。现有
自21世纪以来,随着芯片制造与设计工艺的快速发展,计算机的算力有了质的飞跃,因此机器学习科学取得了空前的应用,尤其是深度神经网络在各领域的应用。在使用传统的最优控制理论处理机器人控制问题时存在两个主要难点,其一是需要清楚的知道被控系统的行为模型;另外一点是模型需要精确的输入输出,使用函数估计器带来的误差很大程度上会导致控制模型的失效。强化学习则需要对每个函数都进行近似估计,通过近似估计实现对实际的
我国拥有相对较为丰富的水能资源,但水能资源利用率相对不足,通过对径流时间序列进行可靠的丰枯性预测可以协助决策供电方案,优化发电资源调配,从而提高水资源的利用率,同时对于防洪抗旱方案的制定都具备一定的指导意义。近年来,对于径流丰枯性预测的研究也取得了一些辉煌的成果,但是仍存在着以下需要解决的问题:(1)径流序列不具备明显规律性,需要进行序列分解,但是传统分解方法受端点值影响较大(2)现实中水文数据的
与完全公开了通信规约的已知协议不同,当今的网络中有着许许多多的未知协议,个人或者一些软件厂商考量到有关安全问题、经济利益甚至个人隐私等各种各样的问题,他们并没有选择将协议的细节部分公之于众。由于未知协议在实现和实际应用过程中可能存在各种类型的安全威胁,且在实际网络环境中,目前的网络安全设备多基于已知的协议报文格式进行检测和防护,导致未知协议在实际通信应用过程中面临着极大的安全威胁。分析其存在的安全