监控视频压缩系统中基于端云协同的后处理研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:caicai_0326
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本文主要研究了面向监控视频的压缩处理方法。对于视频的压缩处理,现有的很多技术方法都是针对普通的视频进行编解码压缩的,然而针对监控视频的处理技术比较稀少。因此,本文提出了一种针对监控视频的压缩处理方法。我们通过结合Hi3559AV100开发板实现了视频的编解码处理工作。随后为了进一步提高图像的质量,我们实现了重构视频的图像质量增强任务。在图像质量增强任务中,我们尝试采集监控视频,并通过Hi3559AV100开发板进行重构来制作用于网络训练、验证与测试的数据集。考虑到开发板编解码视频的特殊性,我们分别构建了用于I帧与P帧处理的网络模型,在构建用于I帧处理的网络时,我们考虑到了帧内预测带来的损失并针对失真现象实现增强。而在构建用于P帧处理的网络模型时,我们额外考虑了帧间预测带来的损失,并针对性的进行图像质量增强。在已有的针对监控视频的压缩处理方法的基础上,为了进一步压缩视频的码率,我们尝试了在编码之前对视频进行降采样,在解码之后对视频进行超分辨率增强来还原视频原始分辨率。我们依旧根据采集的监控视频制作了用于超分辨率增强的数据集。在方法上,我们同时选用了基于单帧的超分辨率增强处理方法以及基于参考帧的超分辨率增强处理方法。在基于参考帧的超分辨率增强处理方法中我们将输入视频分为奇偶帧,将奇数帧直接进行重构,将偶数帧进行降采样操作之后通过开发板进行重构,得到的偶数帧图像将前一帧作为参考帧进行超分辨率增强操作,网络添加了注意力机制将参考帧图像中的纹理信息合理利用来恢复高分辨率图像,超分之后的偶数帧与奇数帧一起合成输出视频。基于单帧的超分辨率增强处理方法采用了子像素卷积层实现了分辨率的提升,通过多层卷积层实现了输出图像的重构。本文提出的这种用于监控视频的压缩处理方法,在保证视频图像质量的同时有效的提升了压缩比。为了进一步提升处理效率,我们进一步实现了超分辨率增强技术与图像质量增强技术向Atlas 200 DK开发板的嵌入工作,大大提升了处理效率,取得了一定的成果。
其他文献
随着自动驾驶的发展,自动驾驶仿真测试技术受到越来越多人的关注。而其中的图像传感器由于价格低廉且获取信息足够丰富受到了自动驾驶系统开发者的青睐,图像算法数量增长迅猛,而对于图像算法的仿真测试需求也随之暴增。目前图像仿真测试方法有两种,第一种是使用相机采集的真实数据进行仿真测试,但是这种方式测试场景受限制,且驾驶条件改变也较为困难;第二种则是使用仿真软件进行测试,这种方法虽然场景搭建自由灵活、且能轻易
空间目标图像质量对空间在轨导航、空间目标识别与空间在轨操作等任务的成败有着重要的影响,而空间在轨任务的对象往往是非合作目标,没有参考图像作为标准。开展无参考标准的空间目标图像质量评估方法研究对未来在轨服务具有重要指导意义。本文重点开展单帧无参考标准的空间目标图像质量评估方法、基于目标三维重建结果的空间目标序列图像质量评估方法研究。首先,建立空间目标图像质量评估标准库。根据空间目标图像在采集过程中的
超声成像因其无创、方便、快捷的特点被广泛用于临床诊断。但是由于其成像特点导致图像对比度低、存在多种伪影以及噪声干扰,对医生的临床经验有着较高的要求。因此利用图像超分辨率技术改善超声图像质量具有重要的临床意义。相比于自然场景图像,超声图像缺少成对的高、低分辨率图像数据集,使得重建任务更具挑战性。本文针对超声图像的特点,采用生成对抗网络(Generative Adversarial Networks,
视频时序动作检测的目标是定位出未剪辑视频中动作片段的开始、结束时间点,并进行动作类别的分类识别,可应用于视频分析、视频搜索、智能安防等领域。现有时序动作检测技术已取得了令人瞩目的进步,但仍难以满足实际应用中的具体要求,因此是当前计算机视觉领域的热点研究问题之一。本文根据实际应用中定位视频动作的具体需求,从时序动作的准确检测、新类别动作的扩展检测、融合语义查询的动作定位三个方面提出解决方案,具体研究
随着信息化智能化社会的到来,在日常生活和工业生产中,数字图像作为人类感知信息的主要渠道变得越来越重要。但是由于复杂的成像环境,设备传输中的噪声往往会带来数字图像的退化。虽然当今时代微电子技术取得巨大进步,成像CMOS芯片像素越来越高,受噪声干扰越来越小。但硬件技术的进步并不能完全解决成像过程中的退化问题。因此本文的主要任务是:使用计算机软件算法解决去噪、去模糊、超分辨率和去马赛克这四种常见的图像复
在工业生产线上,机械臂让刚体零件的装配效率有着极大的提高,但对于线性柔软体零件,比如线缆、软绳等零件,由于自由度多,在受外在作用力的情况下,极易发生形变;并且难以根据机械臂末端位姿推测整个柔软体的位姿。因此当前柔软体装配仅靠机器人是难以完成的。本课题针对带线缆的装配问题,开展了在受限环境下线缆自动装配时存在的问题的研究,其中主要包括无标记线缆的无物理模型下的形状跟踪技术和线缆形状伺服控制的研究。本
本文以装车工业现场货车测量与定位为背景,研究了基于传统方法和深度学习的货车点云分割与测量方法。点云语义分割是三维场景理解的基本任务,在无人驾驶、增强现实、机器人避障等领域获得广泛应用。基于聚类、RANSAC模型拟合等传统点云分割方法适合于规则几何物体分割,但是算法的参数需要手工设置。为了提高算法通用性,本文基于PointNet++基本框架,结合最新的Transformer技术和注意力机制实现KNN
十九届五中全会指出,新时代新阶段的发展必须是高质量的发展,不仅要强化企业创新主体地位,提高全要素生产率,同时应遵循绿色发展、协同发展,全面塑造发展新优势。然而现有关于企业全要素生产率的研究较少关注企业生产过程中的污染问题。少数考察企业绿色全要素生产率的研究多采用将地区污染物按比例折算为企业非期望产出的做法,不仅无法真实判断企业绿色发展质量,更易因“搭便车”行为造成“公地悲剧”。重污染行业作为经济发
随着互联网技术的迅速发展,图像的应用越来越广泛,在图像的传输与存储的过程中也面临许许多多的安全与效率问题。为了实现图像的安全、快速传输,对图像加密与压缩技术的研究具有研究价值和现实意义。本文通过对超混沌系统与压缩感知进行研究,首先设计一个超混沌系统,然后将超混沌系统与压缩感知进行结合,构造安全可靠的图像压缩加密算法。接着,针对压缩感知执行效率低的问题,本文尝试将二维压缩感知引入图像压缩加密方案。本
大数据管理旨在建立支持多种模型、多种类型数据的数据中心。数据湖和数据仓库是构建多种模型数据存储很有前途的体系结构。集成的数据中心在多模态查询处理上面临着很多问题,比如现有的查询语言语义不够丰富、现有的索引调优技术不足以应对复杂的多模态场景、目前尚未有成熟的多模态查询处理技术等。为了提高多模态查询处理的效率,本文研究了多模态查询处理的关键技术,包括统一灵活多模态查询语言Multi-SQL的设计、面向