基于视频超分辨率的研究与应用

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:excalibur
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
超分辨率技术是通过处理一系列低分辨率图像得到清晰的高分辨率图像的一个过程,本质是利用图像本身的空间信息冗余和视频帧中相邻帧之间的时间信息冗余,恢复出高分辨率视频图像,用以获得更细腻的画质,提升人眼的视觉感受。视频图像传输的过程中为了节约带宽往往先对高清视频进行压缩编码,传输至接收端进行解码,但这种压缩后的恢复是有损的,恢复的图像会损失部分信息,将超分辨技术作为视频图像的后处理算法,可以提高视频质量,提升观感。目前的视频超分辨率技术研究进展十分迅速,但在如何充分融合时空信息、如何恢复真实而自然的纹理方面仍需要继续加以研究。本文主要研究日常视频在4倍分辨率恢复的基础上,如何提升视觉质量,得到较好的观感。首先,针对预处理模块,引入了语义分割网络,为预处理模块提供了更多的先验纹理信息。不同物体有不同的纹理,但如果相邻物体颜色十分相近的话,超分辨率网络可能会将其识别为一类,导致纹理恢复的不真实。因此本论文引入了语义分割的先验信息,使超分辨率网络恢复出更加真实的纹理,将超分辨率效果提升了0.59dB。其次,针对融合模块,引入了三维融合技术。普通的二维卷积虽然每一层的特征图可以得到不同的信息,但是每一层的卷积核的信息并不连通,并不能很好的融合视频本身的时序信息。加入三维融合技术后模型能更好的融合视频时序信息,将超分辨率效果提升了0.17dB。最后,针对重建模块,引入了通道注意力机制。虽然在特征提取的过程中,特征图可以达到很深,但并不是每一层特征图都一样的重要,引入了通道注意力机制以后,可以将更多的注意力放在对结果贡献更大的层中,从而能得到更好的效果。并针对一般通用的平均池化注意力通道存在信息不足的问题,又引入了最大池化作为信息补充,将视频超分辨率效果提升了0.42dB。在本文最后进行了实验对比,证明了本文对比以往的算法取得了更好的效果。
其他文献
随着零售市场竞争的激烈,各大品牌营销手段推陈出新。在信息时代的大背景下,移动互联网技术的发展和普及带来了微信、微博、移动客户端等新媒体的繁荣,也为零售业的营销空间带来了技术层面的巨大变化。与此同时,行业与行业之间相互渗透融合,逐渐打造出品牌跨界的新营销模式,以新媒体为主要传播渠道实现品牌传播模式的转型。品牌跨界营销模式在服装行业和箱包行业发展逐渐成熟并向其他行业渗透,其中美妆行业品牌跨界的实践层出
植物中的NPK含量%,在不同年生的普通参、边条参和西洋参之间,无显著差异。亩产百公斤干参根所吸收的三要素量,和大田作物属相同等级。但年吸收量仅为大田作物需量的1/7—1/4
通过对里彦煤矿回采巷道多种支护方式应用情况的对比分析,总结出回采巷道各种支护方式的适用性与优缺点.
通过结合钦州学院的实际,从认识层面、教学班级规模、师资力量、教材问题、课程设置及考核等方面分析了新建本科院校文献检索课教学中存在的问题,并针对这些问题进行了分析和探
目的分析海洛因依赖者血液净化治疗前的心理状况,提出相应的护理对策。方法采用症状自评量表、焦虑自评量表和抑郁自评量表对戒毒所收治的30例海洛因依赖者在采用血液灌流串
中纹大蚊(TiPula SP.)是1983年在蛟河县南岗子乡马鞍山村首先发现的一种危害水稻重要地下害虫,主要以幼虫危害水稻,啃食根部,严重影响其正常生长,造成减产,危害时间长达两个
根据支架与围岩共同作用的原理,通过围岩位移与支架压力关系的数值模拟和现场实践,对预应力U型钢支架及支护技术进行了研究.扼要介绍了预应力U型钢支架特性及其应用情况.
介绍了济宁二号煤矿采区煤仓施工方法,重点介绍了简易滑模结构和滑模套壁施工工艺.
土耳其硬煤公司库兹鲁煤矿1号竖井井筒上部200m左右发生了严重的变形、倾斜,需进行修复.中煤第五建设公司第三工程处根据修复工程的具体情况,决定先用矸石填井,然后采用短段
根据5例子宫肌瘤剔除术患者术中应用垂体后叶素引发心跳骤停的抢救经验,提出预防护理措施,认为术前访视时认真查看患者血压及心电图检查报告尤为重要,以便及早发现是否存在用