面向超分重建的深度信息混合网络及其轻量化研究

来源 :厦门大学 | 被引量 : 0次 | 上传用户:honeysword
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
单帧图像超分辨率(Single Image Super-Resolution,SISR)重建是从低分辨率(Low Resolution,LR)图像重建到高分辨率(High Resolution,HR)图像的处理过程。作为一个典型的不适定性科学问题,SISR是富有挑战性的,因为从LR空间到HR空间的映射可以具有多个解决方案。并且当放大系数较大时,恢复HR图像中的高频细节变得非常困难。虽然基于卷积神经网络(Convolutional Neural Network,CNN)的方法在SISR任务中获得了巨大成功,但值得注意的是随着网络性能的提升其深度也变得越来越深,这就会带来很多的问题,比如:1)由于梯度消失问题,训练非常深的网络极其困难。2)深度网络会出现严重的特征冗余,网络无法高效的利用各层的信息,造成网络性能下降。深度网络的另一个困难是目前它很难被直接投入使用,因为在实际场景中,我们经常会受到计算量和存储量的限制,特别是在移动终端和其它一些嵌入式设备上。然而,目前大多数轻量级网络只关心如何减少模型参数的数量,对于降低模型计算复杂度的研究涉及很少。这为模型的实用性带来了极大的阻碍。针对上述的几个问题,本文对构建高性能的超分网络及其实用化展开了研究,主要贡献如下:1)提出了基于信息混合网络(Information MIXing Network,IMIXNet)的超分辨率重建方法。IMIXNet改进了稠密连接(Dense Connection),使用信息混合模块(Information Mixing Block,IMB)+混合信息直通道(Mixed Information Highway)的结构实现了高层信息与低层信息的快速传递与重组,有效的复用了低层的特征,降低了特征冗余。同时,缓解了深度网络训练过程中的梯度消失问题。实验结果表明,IMIXNet具有非常出色的特征表示和超分重建性能,基于IMIXNet的SR方法与当前最先进的SR方法相比具有更好的性能。2)在IMIXNet的基础上提出了一个轻量化的SR方法,称之为精巧的信息混合网络(Smart Information MIXing Network,IMIXNet_S)。具体来说,本文将信息混合网络的结构裁剪成一个很小的尺寸,同时提出了轻量的残差块(Slim Residual Block,SResBlock)和反向细化模块(Reverse Refinement Module,RRM),以进一步减少参数数量并提高性能。实验结果表明,与其它轻量级模型相比,IMIXNet_S不仅准确性高,而且还具有非常低的参数量和计算量。3)将IMIXNet应用到另外两个计算机视觉任务当中。在小目标识别任务中,由于小目标分辨率低、结构不明显导致其难以被识别,本文通过先对小目标超分再进行识别的方式来提升准确率。在去雾任务中,本文去掉了 IMIXNet的上采样模块,利用其特征提取能力来完成图像去雾操作。实验结果表明,基于IMIXNet的图像超分重建技术有效地提升了小目标的识别率。在图像去雾任务中,基于信息混合网络的图像去雾模型无论在定量指标还是在视觉对比上相较于其它的图像去雾方法都具有很大的优势。
其他文献
在本论文中,我们主要研究在里德堡原子系统中通过调制Foerstelr共振进行量子信息处理的理论方案。第一章,我们首先简单介绍了量子计算的研究背景,然后对里德堡原子系统及Foer
清車王府藏曲本是清代北京車臣汗王府所藏的一批手抄曲本,始自“車王爺”車登巴咱爾,并經其子達爾瑪、其孫那彦圖三代人共同收藏的成果。這批曲本自上世紀二十年代發現至今,
核磁共振(Nuclear Magnetic Resonance,NMR)方法作为一种非侵入性的研究手段,不仅可用于解析物质结构,还能提供分子间相互作用等动力学信息。表面活性剂同时具有亲水和疏水的特性,由其形成的两亲体系如胶束和乳液,能够有效改善难溶性有机物质在水中的溶解性,在医药、食品和化妆品等领域中具有重要意义。然而,胶束的增溶过程及机理以及乳液的形成过程及性质尚缺乏分子水平上的研究依据。在本论
移动无线通信技术的发展日新月异,移动用户设备爆炸性增长,数据流量的需求呈现指数型增加。传统的蜂窝网络已经不能满足高速增长的无线通信需求。通过在传统蜂窝系统中部署小
2016年中国共产党中央委员会总书记习近平在全国高校思想政治工作会议上强调,“要坚持把立德树人作为中心环节,把思想政治工作贯穿教育教学全过程,实现全程育人、全方位育人,努力开创我国高等教育事业发展新局面。”并指出:“思想政治教育工作要贯穿于整个教育教学工作中,要利用好课堂教学这个主渠道,各类课程都要与思想政治课程同行,形成协同效应。”本研究旨在探索课程思政在高中英语教学中应用的有效性和可能性,将社
学位
高校学生党建工作一直是党和国家高度重视的基础性问题,“00后”大学生已成为高校入党的新生力量。据调查,绝大多数“00后”大学生积极向党组织靠拢,入党意愿强烈。但是由于受到社会、学校、家庭以及个人等因素的影响,“00后”大学生入党动机呈现出多元化倾向,并由此产生了一些不良的入党动机。如何端正“00后”大学生入党动机,成为高校党建工作的一项重要研究课题,事关大学生自身能否树立正确的价值观,事关中国共产
学位
茶树是我国重要的多年生经济作物之一。茶叶是著名的三大无酒精饮料之一,因其独特的风味与丰富的内含物质而备受消费者青睐。江苏省是我国名优绿茶的主产区,洞庭碧螺春、阳羡雪芽、南京雨花茶等都是全国有名的名优绿茶代表。近年来随着食品安全问题的日益突出,茶叶重金属污染的问题也受到了消费者们的广泛关注。为了确保茶叶产地土壤生态环境、茶叶原材料及饮茶的安全,利用相关检测技术与评价模型对茶园土壤、茶叶、茶汤重金属含
岩体的失稳预测和损伤机理是岩石力学研究的重要内容,而剪切和张拉是岩体失稳较为常见的形式。大量的理论和实验现象表明,岩石在外载作用下伴随着能量的耗散,声发射的产生与
变换光学技术让人们可凭自身意愿来控制电磁波的传播路径。最著名的例子就是“隐形斗篷”,它可以引导光线绕过物体使物体变得不可见。变换光学理论提供了一种简洁的设计方法,通过材料的电磁参数与空间变换相联系,使得电磁波在实际物理空间和虚拟空间的传播路径相同。依据此设计理论,通过合理的规划实际物理空间和虚拟空间,我们可以设计出各种类型的新型电磁设备。但直接通过坐标变换推导出的介质材料通常为各向异性且不均匀的,
随着人们生活水平的逐步提高和对美好生活的追求,能够带来便利的汽车逐步走进各个家庭,并日益占据重要地位,但交通拥堵的状况和交通事故的频发问题也随之而来。提高道路交通