基于迁移学习的监控视频质量诊断方法研究与实现

被引量 : 0次 | 上传用户:lyaner
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
如今安防变得越来越重要,教室、校园、商场、银行、马路等,随处可见监控设备的身影,监控图像每一帧都包含重要的信息。然而传统的监控质量评价方法基于图像处理,通过对图像地特征提取,存在检测率低,误判漏判的问题。而深度神经网络模型需要大规模视频数据、同时网络训练学习所需服务器硬件成本很高、非常耗时。此外,缺乏神经网络在视频采集现场质量诊断的实时应用推理支持。针对上述亟待解决的问题,为此本文使用无参考质量评价方法,建立一个小型的监控视频故障数据集,基于迁移学习进行监控故障的判别,主要的研究内容取得的成果如下:(1)针对目前监控中普遍存在的黑屏、条纹、雪花、遮挡、模糊等6类典型故障类型,提出了基于迁移学习的监控视频质量检测方法。建立监控故障数据集,通过裁剪、旋转等方法扩充数据集,然后对所获得的4000张图片一一标定,并将其转化成网络检测需要的格式,通过网络对图像的检测判定是否存在质量问题。(2)通过对现阶段经典的目标检测网络比较,最终选用YOLOv5目标检测网络。采用迁移学习方式减少模型对大量数据的要求,针对其中遮挡、图像模糊等故障类型优化网络结构,通过在C3模块中加入注意力机制CBAM,使模型加强对目标信息的关注,及优化网络参数,明显提升了网络模型的检测准确度。(3)基于迁移学习的YOLOv5网络模型,为了提升模型的鲁棒性,将原有的空间金字塔池化替换为更为复杂的SPPFCSPC,增强图像局部特征与全局特征的融合,提升特征图的表达能力。并将Neck模块中的卷积操作全部更换成GSconv,减轻模型的复杂度。(4)最后,为了使模型有较好的实际应用能力,将训练好的模型部署到NVIDIA Jetson Nano嵌入式平台上,通过外界摄像头读取信息,然后利用Tensor RT加速网络模型的推断能力并使用FP16测试。最终的测试帧率为13FPS,且精度损失较少。本文通过对监控视频故障检测的研究,针对数据集有限的问题提出基于迁移学习的监控视频故障判别方法,并基于YOLOv5网络模型进行改进,相较于基础网络平均检测精度从91.4%提升到95.3%,实验结果表明本文研究的新模型具有更好的检测能力,为视频故障诊断提供新的技术支撑。
其他文献
随着现代光学产业的不断发展,精密光学元件的应用已经在航空航天、医学、军事、天文、日常生活等各大领域越来越广泛。由光学元件组成的光学系统已在高功率激光器、大型集成电路、医疗设备等光电子领域发挥了极其重要的作用。在各种光学仪器的使用和开发中,光学元件发挥着极其重要的作用。光学元件表面缺陷是由于加工过程中的不当处理所造成的,其产生的散射光会对光学系统产生各种危害,如:降低光束质量、引发热效应、增大系统噪
学位
国内对单兵光电装备的低照度成像能力和国产化需求不断增长,本文研究了国产嵌入式系统和低照度图像增强的关键技术,设计了基于国产低照度CMOS和海思SD3403平台的低照度CMOS嵌入式图像处理系统。首先,本文分析了系统的技术指标和功能要求,通过查阅论文,梳理了基于低照度CMOS的嵌入式图像处理系统总体方案,将整个系统划分为硬件模块和软件模块两个部分,并最终制定了整体系统软件的工作流程。其次,硬件模块方
学位
光学成像系统作为现代科技中不可或缺的一部分,广泛应用于医学、航空航天、工业、安防等领域。由于其性能的优劣直接影响到成像质量和应用效果,对光学成像系统的性能测试与评价具有重要的意义。传统刀口法测量存在边缘扩散函数采样不均匀、采样不足等缺点,使得测试的成像系统调制传递函数(MTF)误差较大。为了解决这个问题,在对现有测量方法进行分析与研究后,本文提出一种新的测量方法倾斜刀口法,并且给出了相关算法。主要
学位
无铅压电陶瓷具有较好压电性能的同时具备环境友好的特性,可以用来制作环保型压电传感器。本文研究了无铅压电陶瓷的组分设计、制备工艺、性能测试以及其在压电加速度传感器中的应用。无铅压电加速度传感器具有体积小、重量轻、灵敏度高、环境友好、安装方便等优点。压电加速度传感器的性能与其核心压敏元件所使用的压电陶瓷材料密切相关。采用传统固相烧结法制备出(1-x)K0.5Na0.5NbO3-xCaZrO3(x=0.
学位
海洋环境的复杂性使水下生物养殖、海洋测绘以及海底工程应用等行业实施困难,耗费财力巨大。随着科学技术的不断发展,人工智能的发展为解决其问题提供新方法。利用水下机器人的视觉引导完成这些危险任务,不仅保障人类自身的安全,而且还降低成本。现如今,水下机器人获取目标主要方式为声信号和光信号。其中,光信号对目标表达能力更强,获取信息可靠程度更高,因此在海洋侦测领域应用较为广泛。虽然图像获取具有视觉优势,但是海
学位
精密定位是纳米级别的一种高精度定位技术,在高科技领域,特别是半导体芯片的生产中,占据着十分重要的地位。因此精密定位技术已成为世界各国研究的重点,而国内在这项技术上的研究起步较晚,提高定位精度和测量精度一直是该研究方向的难点。为了解决这个问题,本文首次采用先进的调频连续波(Frequency Modulated Continuous Wave,FMCW)测量技术,以压电驱动的精密位移台为基础,设计了
学位
激光雷达是科技发展的产物,阵列激光雷达因更高的分辨率和更快的扫描速度被广泛用于无人驾驶、3D扫描建模、气象环境检测和智能家居物联网等领域。随着激光技术和电子技术的进步,对阵列激光雷达提出了更高的要求,阵列激光雷达要实时处理信号和数据,要求系统的计算能力和通信功能强大,还要有可靠的稳定性和精度。阵列雷达逐步向着集成化,低功耗、高安全的目标发展。本文选择工作在盖革模式下的APD阵列作为激光雷达的光电探
学位
随着光学科技的快速发展,光学元件被广泛应用于航空航天、国防军事、医疗和通信等领域。但在光学元件加工过程中,由于加工工艺的问题,会在其表面产生麻点、划痕等缺陷,严重影响由其组成的光学系统的稳定性,甚至会影响整个光学系统的成像质量。传统的缺陷检测算法存在复杂且准确率低等弊端,已经无法满足光学元件高精度检测的需求。因此课题针对光学元件表面缺陷的准确测量展开研究,主要的研究内容如下:通过对光学元件表面缺陷
学位
复杂曲面比球面具有更多的优化参数,一块复杂曲面能够校正多片球面所能校正的像差,使光学系统结构得到简化。目前复杂曲面的加工工艺逐渐发展成熟,复杂曲面面形检测技术已成为制约复杂曲面应用的主要因素。干涉补偿检测是一种常用的复杂曲面检测方法,传统干涉补偿检测使用计算全息图(Computer Generated Hologram,CGH)补偿检测复杂曲面,但检测不同复杂曲面时,必须设计相匹配的计算全息图进行
学位
火炮身管作为火炮的关键组成部分,其质量对火炮使用性能及安全性有着重要的影响。在火炮进行发射时,产生的高温高压气体会对内膛表面产生烧蚀,同时弹丸也会对其造成冲击和磨损,产生疵病,影响弹丸的正常发射。因此,内膛的质量检测成为火炮生产和使用的重要项目之一。CCD作为传统的火炮身管内膛检测方法,可以获取身管内壁的全景图像来进行疵病检测,但仍存在容易误判、无法定量分析缺陷程度的缺点。因此,如何更加准确、全面
学位