基于注意力机制深度网络的图像超分辨率研究

来源 :中国计量大学 | 被引量 : 0次 | 上传用户:buffisher
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
作为计算机视觉领域的一个重要分支,图像超分辨率重建主要利用计算机技术,从低分辨率图像恢复出高分辨率图像.它在卫星地图、视频监控、交通检测等领域都有着重要的应用.为了解决多种下采样方式和图像重建信息不适定的问题,本文在深度学习框架下设计有效提升图像重建质量的超分辨率重建方法:基于重建注意力卷积神经网络、基于重建注意力非对称卷积神经网络、基于U形多尺度注意力卷积神经网络以及基于两阶段协调深度卷积神经网络的超分辨率重建方法,具体内容如下:1.基于重建注意力卷积神经网络的超分辨率重建方法.大部分现有基于注意力机制的深度网络未考虑重建部分中各个特征图会对最终的结果会产生不同影响.为了解决这一问题,我们提出重建注意力机制并构建基于重建注意力神经网络(RAN)的图像超分辨率重建方法.该重建方法首先采用不同尺寸的卷积核提取不同尺度下的特征图;其次引入通道注意力对特征图进行选择;最后提出重建注意力,即对每个单元输出的高分辨率特征图进行加权组合,然后得到最后的高分辨率图像.因此,提出的多尺度卷积能帮助网络提取到不同尺度下的特征,通道注意力能选出同层中重要的特征信息,而重建注意力将选出重要的重建特征层.实验结果表明本文所提方法比现有的一些超分辨率方法有更好的重建效果.2.基于多尺度非对称卷积神经网络的超分辨率重建方法.由于深度卷积神经网络中方形卷积核提取能力有限,我们采用非对称卷积核代替传统方形卷积核的方案;与此同时,针对现有的重建网络未详细地考虑网络重建部分的不同作用,我们提出划分网络重建部分的概念并构建基于多尺度非对称卷积神经网络(RAAN)的超分辨率图像重建方法.该方法首先使用不同尺寸的非对称卷积核提取不同尺度下的特征图;其次引入通道注意力对图像通道进行选择;然后采用主重建、次重建和放大重建的方式得到相应的重建图像.最后,网络最后部分把上述三者加和在一起得到最终的重建图像.因此,本文所提得非对称卷积结构能够帮助网络提取到更多图像特征信息,多种重建方式能够提升重建图像的质量.实验结果表明,所提超分辨率重建方法比现有的一些超分辨率方法有更优的重建质量.3.基于U形多尺度注意力卷积神经网络的超分辨率重建方法.由于现有的卷积神经网络很少考虑图像细节特征的问题,我们提出多尺度注意力机制并构建基于U形多尺度注意力卷积神经网络(MSAUN)的超分辨率图像重建方法.该方法首先使用U形网络提取图像的信息;其次引入图像信息整合的概念,实现不同尺寸图像信息之间的流通;然后提出多尺度注意力概念,即对不同尺寸的图像进行加权组合;最后使用多源图像整合重建的方法得到高分辨率图像.因此,所提得多尺度注意力能够选出多重尺度图像中的重要特征信息.实验表明,所提得网络能够取得比现有一些重建方法更好的重建效果.4.基于两阶段协调深度卷积神经网络的超分辨率重建方法.由于现有的卷积神经网络只应对单一下采样图像的问题,我们采用了共享网络特征提取部分的参数且根据数据区分训练重建部分的方案,然后构建两阶段协调深度卷积神经网络(TSCN)的图像超分辨率重建方法.该方法首先使用三层卷积核对图像进行浅层特征提取;然后使用4个简单的单元结构实现网络中的深层特征提取;最后网络使用分开输出的方法来训练不同下采样的数据.实验结果表明,所提得超分辨率方法能有效协同各方面的数据,在多重下采样数据下达到较优的重建效果.
其他文献
获评全省扫黑除恶先进集体、推动解决民生诉求13887个、查处群众身边违纪违法问题925件,建成覆盖全市党员干部和公职人员的监督信息协作平台……回顾2021年绵阳市纪检监察工作,亮点成绩展现在工作实践的各方面,既有对做实政治监督的深化、践行人民立场的关切,也有对数据赋能监督的探索、强化自我约束的勇气。这些成绩的取得与利剑护航、培土育林、新风扬帆、贯通协同、人民阅卷、铸魂固本"六大行动"密切相关
期刊
目的研究不同麻醉方式对剖宫产产妇母脐血中缺血修饰白蛋白(IMA)、白介素-2(IL-2)、白介素-6(IL-6)水平的影响。方法选取2019年4月至2021年4月于南阳市卧龙区妇幼保健院进行剖宫产手术的113例产妇,根据不同麻醉方式分为硬腰联合麻醉组(n=63,硬腰联合麻醉)和全身麻醉组(n=50,全身麻醉),比较两组麻醉效果、麻醉相关指标(麻醉起效时间、麻醉用药总剂量、清醒时间)、母脐血中IMA
电气工程是建筑项目中的重要分部工程,建筑电气工程及安装工程的质量对项目能否顺利竣工并投产使用,起到重要的影响作用。因此有必要研究电气安装过程中存在的质量问题,并针对性地提出解决措施,以提高建筑电气工程及安装工程质量。
近日,国家发展改革委、中央网信办、工业和信息化部、国家能源局联合复函,同意在京津冀、长三角、粤港澳大湾区、成渝、内蒙古、贵州、甘肃、宁夏等8地启动建设全国一体化算力网络国家枢纽节点,并规划了10个国家数据中心集群。至此,全国一体化大数据中心体系完成总体规划布局,“东数西算”工程正式全面启动。“东数西算”中的“数”指的是数据,“算”指的是算力,即对数据的处理能力。“东数西算”工程的实现离不开数
期刊
面向纳米材料结构和性质的可控调制,本文以WO3-x、WO2、Ti3C2等准金属为研究对象,从纳米材料的合成、形貌和尺寸调控以及对纳米材料的组装技术出发,可控地制备出形貌不同的WO3-x、WO2、Ti3C2纳米材料,并将其作为SERS基底。传统的SERS基底的使用方法是将纳米材料悬浮液滴在玻璃板上进行扩散,往往会导致基底的不均一,而本研究采用的微纳米印刷技术将纳米材料喷涂成图案化SERS芯片,不仅极
“东数西算”工程启动,数字经济发展“奇点”已至?2022年2月17日,国家发展改革委等部门联合印发文件,同意在京津冀、长三角、粤港澳大湾区、成渝、内蒙古、贵州、甘肃、宁夏启动建设国家算力枢纽节点,并规划了10个国家数据中心集群。至此,全国一体化大数据中心体系完成总体布局设计,“东数西算”工程正式全面启动。艾媒咨询《2021中国数字经济产业发展研究报告》显示,2020年我国数字经济总体规模达到
期刊
今年是承前启后、继往开来的一年,经过全党全国各族人民持续奋斗,我们实现了第一个百年奋斗目标,正式向第二个百年奋斗目标迈进。回首百年征程,党领导人民在进取中突破、于挫折中奋起、从总结中提高,不断从胜利走向新的胜利,一个重要法宝就是守正创新。守正创新彰显历史自信、时代自觉、实践主动,守正是创新的基础和前提,创新是守正的继承和发展,二者相伴相随、互促共进,只有在守正基础上创新才能更好地传承成功的做
期刊
现代学徒制下高职会计人才的"工匠精神"是要竭尽所能地输出品质最高的经济业务信息,提供近乎完美的会计服务,不放过任何细节。高职教育作为培养工匠型人才的使命担当,应将"工匠精神"融入人才培养方案的始终,落实到教育教学环节之中。本文以淮海地区两家高职院校会计专业为调研对象,展开问卷调查、深度访谈,从校园文化建设、工匠精神课程体系开发、现代学徒制模式下的校企合作、培育工匠之师等方面探索培育的新路径。