基于目标检测的智能视频编码方法研究

来源 :浙江工业大学 | 被引量 : 0次 | 上传用户:w1141
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着图像采集与显示技术的快速发展,4K/8K等高分辨率视频正逐渐进入我们的工作和生活。新一代视频压缩标准(HEVC)虽然较前一代H.264在高分辨率视频的编码上节省50%左右的码流,但由于高清视频图像的分辨率成倍增加,压缩后的视频数据量仍然很大,而且目前网络带宽资源仍然比较有限,这给视频数据的传输和存储带来很大的挑战。现有的视频编码标准在对视频进行编码时,虽然可以有效去除视频的空冗余信息,但并没有考虑到人眼视觉特性,对于那些不符合人眼视觉特性的区域,经常消耗不少的码率资源,从而影响那些人眼关注区域的图像质量。因此,如何在有限的网络带宽和存储空间下合理分配码率资源,使压缩后的视频图像更加符合人眼视觉特性至关重要。为了解决上述问题,本论文提出了一种基于目标检测的智能视频编码方法,主要的工作和成果如下:(1)搭建X265编码平台,对HEVC编码标准的关键技术进行分析;根据人眼视觉特性,设计基于目标检测的智能视频编码方法的总体研究方案。(2)针对传统感兴趣区域编码方法在检测感兴趣目标时检测效果不佳且没有检测具体内容的问题,提出了一种基于卷积神经网络的感兴趣区域提取方法。首先根据应用场景确定感兴趣的目标对象,选择卷积神经网络模型对目标对象进行训练;然后将视频图像输入到卷积神经网络检测感兴趣目标对象,提取感兴趣目标对象位置坐标、置信度最大的目标对象类别及目标对象的数量;最后对提取的位置坐标进行后处理,生成感兴趣区域。(3)根据人类视觉系统的特性,设计了一种视觉感知图的生成方法,用于后续的感兴趣区域编码。首先通过高通滤波器计算每个像素点的边缘强度,确定每个像素点的方向属性;然后计算当前编码单元(CU)块中纹理复杂度,根据每个CU块的纹理强度信息,生成编码树单元(CTU)级的纹理感知图;最后提取平坦区域、结构化纹理区域和复杂纹理区域并生成纹理感知图。(4)针对视频编码过程中的比特资源分配问题,提出了一种基于视觉感知的HEVC感兴趣区域编码方法。根据编码块的纹理复杂度,对感兴趣区域的量化参数进行不同程度下调,对非感兴趣区域在变换域采用频率系数压制的方法对高频系数进行压制,从而实现比特资源的合理分配。(5)设计并实现了一种基于Jetson TX2的智能视频编码器。首先选择Jetson TX2作为硬件开发平台,设计智能视频编码器,主要包括视频采集、感兴趣区域提取、感兴趣区域编码和码流传输模块。最后通过测试分析,验证了智能视频编码器的编码效果,实现了感兴趣区域智能编码的功能,提升了感兴趣区域的图像质量。
其他文献
北方输电线路冬季因受冰雪危害引起的供电中断事故严重,修复工作难度大、周期长、停电面积广,是全世界范围内需解决的难点问题。针对高压输电线路覆冰情况,提出了一种线路除
近年来,以CH3NH3PbI3为代表的有机-无机杂化钙钛矿材料,因其具有电子—空穴扩散长度大、能带可调、载流子迁移率高、吸光系数高等优良的光电特性,在太阳能电池、激光器、发光
目的研究泮托拉唑与生长抑素联合治疗上消化道大出血的临床疗效及药理作用。方法选择2017年12月~2018年12月在我院进行治疗的上消化道大出血患者90例作为观察对象,按随机数字
多生物特征识别在网络安全中具有巨大的研究价值,能有效提高网络信息系统的安全性。通过介绍指纹、虹膜、面部识别、声音、掌纹、签名、击键识别等生物识别技术,在分析说明多生
《天机·富春山居图》无疑是六月份最引人注目的电影,一边是网络上铺天盖地的恶评轰炸,一边是持续飘红的票房;乍看起来,这种"烂片吸金"的现象蔚为奇特。但从大众文化的角度看
为进一步研究国产硫酸依替米星的安全性和临床疗效 ,在上海市组织 11家医院共 35 0例病例进行了 期临床实验 ,研究采用多中心开放式非对照试验设计 ,硫酸依替米星剂量为 2 0
随着我国采矿设备制造业的科技进步,露天采矿设备逐渐向大型化、机械自动化方向发展。我国现正在生产的几座大型露天煤矿的穿孔设备已普遍采用200mm以上孔径的牙轮全液压钻机
通过对电阻抗图谱(EIS)参数及抗性生理指标的测定,研究了6种不同观赏树木金枝国槐(Sophoraja-ponica‘GoldenStem’)、蝴蝶槐(Sophorajaponicavar.如£堙户0肿yz缸)、西府海棠(Malusmicr
模糊限制语是一种交际策略,它表明命题的观点而非事实,时常与可能性及不确定性相关。近年来学者们对模糊限制语进行了语义或是语用等角度的研究。基于前人的研究,笔者试图利
热分析技术作为全面测量物质性质与温度关系的新型技术,其一经问世便凭借着准确、灵敏的检测速率在各方面得到验证与推广,其在高分子材料研究中也发挥出了自身的优势。本文主