基于GAN的视频超分辨率研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:jiaoxuepan
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机软硬件技术的高速发展,图像、视频处理技术也得到了巨大的进步,而图像和视频的超分辨率问题一直是计算机视觉领域的一个热门研究问题,在视频监控,遥感技术,军事及医学等很多领域都有广泛的应用前景。以给定的低分辨率图像和视频为基础,采用算法来提高图像与视频的超分辨率,获得高清的图像和视频,一方面能节省大量的带宽,另一方面为特定的应用场景提供额外的体验和更好的细节。传统的超分辨算法一般归类到基于插值,重建和学习三个类别。尽管近年来传统方法在该领域取得了不少成果,基本能够快速达到超分辨率的目的,但是图像会出现模糊平滑,产生噪声等问题,从而会导致某些感兴趣细节的缺失。与传统方法相比,最近流行的基于深度学习的方法取得了很好的效果,能部分解决传统超分辨率所不能解决的问题,从而逐渐在超分辨率领域扩大了深度学习的研究和应用。在深度学习领域的超分辨问题上,现在所熟知的方法有超分辨卷积网络(SRCNN),基于高效亚像素卷积的实时单图像和视频超分辨率(ESPCN),时空网络和运动补偿的实时视频超分辨率(VESPCN),对抗神经网络对单幅图像的超分辨率(SRGAN)等算法。这些图像和视频超分辨率方法在一些数据集上取得了很好的成果,基于深度学习的超分辨率方法确实取得了远超传统方法的性能。本文的主要研究内容是采用GAN网络来进行超分辨率的研究。用生成网络生成图像,而用对抗网络来判断该图像是网络生成的还是原始的,并通过学习训练来使得网络生成的图像逐渐逼近于原始的高清图像。在采用GAN来进行超分辨研究的第一种算法SRGAN中,将其应用于图像超分辨领域,之后又有一些相关的研究。但目前采用GAN来做视频超分辨的研究很少,本文采用GAN来进行视频超分辨的研究。首先,本文利用GAN进行单幅图像的超分辨率研究。从GAN生成网络的内部结构和损失函数等方面,优化GAN网络的设计,获得了更好的超分辨结果。其次,提出了基于GAN的视频超分辨率算法。通过引入视频中的时序信息和运动信息,将其与GAN网络的结构相结合,设计了基于运动对齐的GAN视频超分辨结构,并在数据集上进行了大量的实验,结果表明,我们提出的算法在图像和视频上均取得了较以往算法更好的结果。
其他文献
本文旨在介绍一种碰撞耐久型结构粘结剂,该产品应用在车身法兰边,可以通过提高车身结构连接强度进而提升车身刚度,防撞性和耐久性,以及避免或减少焊点撕裂问题。该产品已经在
目的探讨碱性清洗剂在消毒供应中心清洗质量当中的应用价值。方法选取本院所使用过的120件污染器械作为对象,根据数字法分为对照组与观察组各60件污染器械,对照组使用多酶清
观念摄影在我国自二十世纪九十年代以来,流行并发展至今。作者通过当代的艺术手法,创作完成《丘白》这一系列作品。本文在探讨观念摄影概念的同时,以社会学角度审视个体与群
本文从物价与经济指标的长期与短期均衡关系出发,分析了当前的物价形势,并对2005 年第4季度和2006年的消费价格指数和生产资料价格指数走势进行了预测。根据分析和预测结果判
为保证优质的原辅料用于制剂生产,就从事制剂原辅料质量管理的人员要求、仓储设施,原辅料的购进、验收、储存、养护、发放、拆零,待检品、不合格品处理,仪器、器具和设备维护
高校辅导员是进行大学生思想政治教育的中坚力量,是大学生思想政治教育和日常管理工作的具体组织者、执行者和引路人。如何用社会主义核心价值体系引领高校辅导员的思想政治
个别预防论具有其理论缺陷与实践困窘。其理论缺陷在于它因否定刑罚的报应性而有失公正 ,因对一般预防的忽视而有失功利 ,因自相矛盾与以偏概全而不合逻辑 ;其实践困窘在于其
<正>春节、情人节在上个月已经度过。在家人团聚、爱人相拥的瞬间,你是否将那幸福美满的瞬间记录下来了呢?3月《大码》教您一些人像拍摄的方法,这样能够在以后的出行和聚会中
期刊
现阶段我国污水处理行业面临着严重的发展瓶颈,政府部门无法提供足够的资金支持,而且现行的污水处理服务供给体制也难以提升污水处理服务的效率和质量。因此,国家尝试推行污
立法法理学是针对传统司法法理学而提出的研究立法的新的理论进路,法律及其与政治的关系是理解立法法理学内在逻辑的核心链条。自由是立法法理学的微观基础,政治的环境则是其