基于深度学习的低码率视频编码质量提升技术研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:zhangchaoyi222
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视频编码作为压缩视频的一种重要手段,目前最新的一代视频编码标准为HEVC,HEVC不仅获得了高额的压缩率,而且大幅地降低传输码流大小。但是在低码率下,由于编码器采用较大的量化参数,会引入很大的压缩失真,其中图像细节丢失,视频图像中会出现严重的伪影现象,造成图像的严重失真,使人为观感受到了极大的影响。针对低码率视频编码过程中采用较大量化参数导致的压缩失真过大的问题,研究了基于深度学习的低码率视频编码质量提升的算法,深度学习作为一种近几年来发展比较迅速的一门学科,相比于之前的传统方法,深度学习在增强图像质量,降低视频码流等取得了非常好的处理结果。在我们的实际应用场景中,我们会遇到在带宽不足的情况下又需要传输分辨率比较大的视频,现有的视频编码标准不足以提供一个完美的参数能够获得很好的压缩后的视频。为了解决这一问题,本文提出了一种基于视频图像重构神经网络的视频框架。首先,我们重新定义了一下编码框架,首先降低视频空域的信息量,将高分辨率视频下采样到低分辨率视频,对低分辨率视频再由编码器进行压缩传输得到受损的低分辨视频,而后将解码的低分辨率视频图像重构恢复到原始分辨率。视频图像重构神经网络作为该编码框架中最重要的组成部分,该网络的性能好坏决定着视频图像的质量。通过实验的分析最终决定视频图像重构神经网络主要包含两方面:图像修复与图像超分辨率。图像修复网络主要作用是去除编码器在低码率下带来的图像失真和块效应消除,图像超分辨率网络主要作用是将解码后受损的视频图像分辨率扩大到目标分辨率,提高视频像重建质量,尽可能多地保留图像的细节。通过构建训练集以及损失函数的整合,通过不断的训练测试使得网络对视频图像重构处理的性能达到最好。在测试过程中,我们保证编码器与新的编码框架在编码视频时采用相同的码率编码测试,在对不同类型的测试视频测试后,基于视频图像重构的编码框架比HEVC编码框架能够获得平均0.5dB的PSNR增益,比Bicubic方法上采样能够获得平均约0.4dB的PSNR增益。除此之外最重要的一点是,与HEVC相比基于视频图像重构的编码框架能够有效去除在低码率下视频编码带来的压缩失真,主要包括块效应,振铃效应,伪影,模糊等噪声,并且能够保持图像的边缘信息和纹理细节信息,大为改善主观质量,能够大幅度提升视频质量。
其他文献
基于MODIS NDVI数据,研究分析了2000—2010年内蒙古典型草原、草甸草原和荒漠草原生长季NDVI时空变化趋势,探讨不同类型草地生长季NDVI对温度、降水的响应。结果表明,内蒙古
本文以协调管理在建筑施工管理中的作用为研究对象,首先对协调管理的内容及作用进行了探讨,随后分析了建筑施工管理中协调管理依据,最后针对如何进行协调施工管理,提出了一些
采用公共阳极法实现了Pyrex玻璃与铝多层晶片的静电键合,对玻璃/铝/玻璃阳极接合界面的组织结构及其连接机理和力学特征进行了重点研究。分别利用微拉伸测试设备和ANSYS软件分析
《第九区》与《极乐空间》两部科幻电影对"隔离"体制的心理机制进行了深刻的思考。两部影片以他者所散发之"气味"的视觉呈现与叙事描绘,说明对他者物理性隔离的心理性基础来自于
目的 探讨重组人粒细胞集落刺激因子(rhG-CSF)对儿童急性粒细胞性白血病(AML)的疗效及安全性。方法 17例AML病儿化疗后中性粒细胞绝对值(ANC)〈0.5×10^9/L者共67例次,其中治疗组4
介绍了PHF-102催化剂首次在中国石油天然气股份有限公司辽阳石化分公司1.20 Mt/a柴油加氢精制装置上的工业应用情况.结果表明:硫质量分数1 700 ~4 600 μg/g的常减压直馏柴油,
细胞在长期的进化过程中发展出了一套保证细胞周期中DNA复制和染色体分配质量的检查机制,通常被称为细胞周期检查点。当细胞周期进程中出现异常事件,这类调节机制就被激活,及时地中
<正> 织物的手感,一般认为是织物的某些机械物理性能和表面性能,通过人手的触感而引起的一种综合反映。它是组成织物风格的一个重要部分,也是评定织物品质的重要方法之一。关
煤矿事故中发生概率最大的就是塌方,因此研究煤矿综采工作面的支护问题就显得十分重要。本文主要分析了煤矿开采工作面的几种支护问题,希望可以减少煤矿开采工作中的事故。
在终身教育背景下,我国成人高等教育已逐渐成为社会人才的重要供给来源,在社会经济建设中发挥着积极作用。随着我国教育改革事业全面推进,成人高等教育也实现了快速发展,并取