基于GAN和注意力机制的图像及视频增强算法研究

来源 :安徽工业大学 | 被引量 : 0次 | 上传用户:xulei25163974
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像增强通常是指改善图像的视觉效果或突出某些图像特征,一般包括图像去噪、图像超分辨率、图像去模糊等底层视觉图像处理。近年来,随着深度学习在图像分类、目标检测与跟踪等计算机视觉高层任务方面大获成功,在底层视觉的图像增强领域,深度学习方法也开始被深入研究及广泛应用。本文基于深度学习前沿热点的理论和方法-生成对抗网络(GAN)及注意力机制,围绕图像及视频超分辨、运动去模糊等图像增强任务,提出了一些新的、有针对性的深度模型及方法,取得了较好的效果。本文的主要研究工作如下:1)基于特征保持GAN模型的人脸图像超分辨重建针对传统卷积神经网络人脸超分辨重建算法存在的人脸图像模糊问题,我们提出了一种基于特征保持GAN的大倍率人脸图像超分辨深度学习模型。该模型可在不使用任何先验信息的情况下实现极低分辨率的人脸图像8倍率超分辨。我们在传统的图像内容判别网络之外,额外引入了人脸特征判别网络以实现人脸特征保持图像重建。2)高阶门控注意力学习联合图像超分辨率和运动去模糊当前大多数图像退化工作通常假设低质量图像都是由一种退化因素导致,但实际低质量图像通常是由分辨率降低、模糊及噪声干扰等一系列因素产生。为此,我们研究了图像多重因素退化模型,并分析了图像运动去模糊与图像超分辨任务子网络的特征相关性,采用高阶门控注意力机制来自动学习不同阶注意力内容并融合,以实现联合图像超分辨率和运动去模糊。3)结合非局部模块和时域信息融合的深度注意力视频图像增强针对现有深度学习视频超分辨方法性能表现不佳的现象,我们基于深度注意力学习网络,引入非局部(Non-local)模块和时域信息融合,给出了一种新的视频图像增强深度模型。该模型采用多帧融合和非局部模块处理各种复杂运动,在优酷视频挑战赛中表现出较好的视频增强效果。
其他文献
随着我国公路网络的不断完善和以养为主时代的到来,以及社会发展对路面管理的要求越来越多,路面管理不仅需要对路面技术状况负责,还须顾及养护计划对社会与环境等方面的影响,公路养护已逐渐由过去的单一化管理向多目标化、综合化管理转变。但由于我国公路养护管理长期处于重建轻养的偏见中积重难返,以及因养护需求不断激增的压力,使得我国公路养护管理目前还存在一定问题。具体表现为养护资金紧缺、养护资金使用缺乏综合性分析
教师的课堂教学语言作为师生课堂教学活动顺利开展的媒介,发挥着重要的作用,即通过交流使得教师对学生传授知识技能、增进对彼此的理解。课堂评价语言作为小学语文课堂中师生之间交往的必要环节,贯穿于课堂教学的始终,是教学中最及时方便、使用频繁、对学生影响巨大且深远的一种过程性评价方式。对小学语文课堂评价语的运用现状进行研究,是基于新一轮基础教育课程改革中小学语文课程标准的新需要,又符合教师提高自身素养以及学
党的十九大报告中提出了深化“放管服”的新要求,促使各职能部门将行政审批权落实下放至窗口,进一步推动了行政服务中心的发展。同时,随着信息化时代的到来,全国各地都加快了建设政务服务网的步伐,在实体办事大厅的基础上,又开始探索建设网上办事大厅,大力推行“互联网+政务”服务建设。总体来看,我国各地的行政服务中心随着时代的发展不断地涌现,逐步向基层扩展和延伸;并且其自身也在不断地追求发展和进步,从一开始纯粹
科学技术是第一生产力。随着科技的进步,带来的全球资源过度消耗和环境问题也日益严峻。在当前可持续发展的战略目标下,企业在扩大生产规模和增加效益的基础上,还要降低成本、减少环境污染。烧结作为钢铁生产中重要工序之一,对含铁矿石原料的需求量大,生产成本高。又由于国内矿产资源的加剧减少,铁矿石种类来源不稳定,企业需要从国外进口铁矿石,进口的铁矿石种类多且成分不一,要不断地对铁矿石的配料比例进行调整。因此,研
随着社会的迅速发展和人们生活水平的不断提高,我国多数城市都受到雾霾影响,尤其是在长三角、珠三角以及京津冀等经济发达的地区。PM2.5作为首要空气污染物,有较强的吸附性,
春秋战国各主要思想巨流的出现,各有其地域文化的酵母。同时,思想的流传和交融,其作用也不可小看。这样的交融以齐国的稷下学官突出。稷下为齐都临淄西门之称,有系水经过,齐
近年来,计算光谱成像技术作为一种新型的光谱成像技术,能够实现对目标的空间、光谱信息的快照式成像,弥补了传统光谱成像技术需要多次曝光等缺点。论文基于计算成像理论,设计
医药制造业作为典型高技术产业,其健康发展与经济增长、国民健康和社会稳定息息相关,创新能力对医药制造企业长远发展意义重大。研发投入和专利产出是创新链条上的关键环节,
随着2001年加入世界贸易组织,中国的汽车产业发生了天翻地覆的变化,汽车销售量呈现井喷式增长,从2002年的300万辆上升到了2015年的2400万辆,中国一度成为全球汽车的产销售量冠军。随着国家相关政策的大力支持和“十三五规划”、《中国制造2025》规划的不断实施,发展自主品牌汽车已经成为我国实现制造强国战略的重要一环。长城汽车作为我国知名度较高的国产自主品牌汽车,近些年取得了一系列成就,公司旗
特色小镇是经济社会发展到一定程度后的差异化必然产物,是培育新兴产业和聚集高端人才的重要载体。从我国特色小镇的发展形势来看,目前取得了一定成效,但出现了房地产化严重、盲目建设、各方合作不紧密等问题,导致现有的激励机制已无法达到特色小镇可持续发展的目标。因此,应根据我国特色小镇发展的节奏,建立动态的政府激励机制,平衡各主体之间的利益关系,以实现特色小镇的健康发展。本文首先分析了特色小镇发展现状,总结了