基于迁移学习的图像超分辨算法研究

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:fso2084
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着科技的发展,人们对数字流媒体如图像、视频的感官效果出更高要求,然而受拍摄设备、自然环境、存储空间以及网络带宽等限制,人们的使用体验和视觉感受往往无法同时得到满足。图像超分辨任务作为优化各种场景流媒体质量的深度学习任务,也被赋予更高期待。图像超分辨任务常利用简单下采样获取图像对进行训练,但由于域差异性,网络在真实场景往往表现不佳;且理论上任务的真实场景图像对无法获取或成本极高,难以通过收集数据集解决此问题。迁移学习中领域自适应能够有效克服不同数据或任务间的域差异性,且基于样本、特征、模型等迁移方式,都是真实场景任务的良好解决方案。在本文中,通过底层视觉任务中图像超分辨的真实场景适配问题,依据超分辨率问题思路,针对不同图像所需超分程度不同,结合领域自适应设计了一种能够同时从源域和目标域进行约束的带有前退出机制的迁移超分辨算法TSRN-Early Exit(Transfer Super-resolution Network-Early Exit)。网络拥有多条输出支路,能够动态对恢复图像进行判断,满足条件即可输出,实现了效果与消耗的双赢。本文通过生成拟真实场景图像的方法解决传统简单下采样的缺点及真实数据集稀缺性的难题。针对网络输出和真实图像的空间不一致问题,设计了以SSIM分数为基础的自步学习策略,使网络由易至难地学习,从而升收敛速度和迁移效果。本文采用步进式的介绍方式,后三章分别对上述各方法进行设计及优化。综上所述,本文主要贡献如下:1.本文首先设计了迁移超分算法TSRN,进而出带有前退出机制的真实场景迁移超分算法TSRN-Early Exit,这也是该机制在超分领域的首次应用。网络拥有多条输出支路,满足条件的图像能够在任一支路前输出,因此网络能够很好的权衡恢复效果与资源消耗;且网络同时完成了源域、目标域下基于特征及样本的领域自适应。在训练过程中,引入带权损失策略更好地诱导各支路的训练,且利用小波变换增强超分辨及迁移效果。2.本文使用自步学习思想,设计一个即插即用的空间注意力策略,解决超分图与真实图的空间不一致问题。该策略让网络完成由易至难的学习,加快收敛速度的同时增强迁移效果。3.在TSRN和TSRN-Early Exit的实现过程中,分别构建拟真实场景数据集Real SRgen、DIV2Kgen和混合图像数据集Real SRLRmixed,以适应算法设计、检验算法效果。4.各项工作都通过充分的对比实验及消融实验的验证,各结果均显示迁移学习应用的可行性及出方法的有效性。
其他文献
图像超分辨率是计算机视觉任务中的经典问题,它旨在使用超分辨率算法从低分辨率图像恢复高分辨率图像。图像超分辨率广泛应用于医学成像、卫星图像分析、高清视频处理、安全与监控等领域。近年来,随着深度学习的发展,基于深度学习的方法逐步超越了传统超分辨率方法。基于传统的插值方法,如线性插值,二次插值,双三次插值通常带来平滑的图像结果。相比于传统的插值方法,基于深度学习的方法能充分恢复图像的纹理细节,并在图像的
阐述由于电力行业市场环境的变化,电力设计企业从单一设计业务转型开展工程总承包业务成为必然趋势,探讨企业从项目的技术方案、标准、参数、设备管理等方面着力开展工作,发挥技术优势,有效提升总承包项目管理水平,从而形成设计为龙头的核心竞争力。
近年来,随着新能源汽车产业蓬勃发展,电动汽车退役动力电池规模急剧增加。将退役电池梯次利用组成储能系统,可延长电池寿命、提高资源利用率。但退役电池由于经过长期的充放电循环,存在容量不一致和SOC不一致,当串联电池数量多时,不一致性更为明显,为充分利用电池组可用容量,应对其进行均衡控制,以提高电池组容量利用率。本文以梯次电池储能系统为研究对象,针对其均衡系统进行研究,主要内容如下:首先,分析梯次电池容
2020年初以来,新冠肺炎疫情检验了我国应对突发公共卫生事件的能力。疫情防控过程中,社区发挥了不可替代的重要作用。本文以大湾区城市东莞市D社区为案例,开展了对D社区居民疫情防控工作满意度问卷调查,从社区居民的认知、感受和反馈中了解D社区疫情防控工作成效及存在的短板和弱项,并就如何完善社区应急管理提出改善建议,为城市社区疫情防控工作提供启发和思考。
随着科学技术的不断进步,其对整个社会发展也带来了极大促进作用,可有效提升人们的生活水准,促使人们更加关注社会安全性与社会质量。为了给众多百姓营造更加稳定、可靠的用电环境,电力企业一定要重视各项变电设备的安全管理工作以及后续的设备维护问题,保证电力系统稳定运行。因此,本文对变电设备运行的安全管理与设备维护问题展开了深入研究。
当今时代是一个猎新、猎艳、猎奇的时代,作为大众传媒之一的电视台,为了获得高收视率,在不断的满足这些需求。这就导致电视台不断的播放一些新奇的节目或者包含暴力、情色的节目。这些节目的播放,给一些分辨能力低的群体,尤其是少年儿童的身心造成很大的负面影响。本文就是通过分析儿童节目中的暴力元素对儿童的身心造成的影响,来探寻如何应对这些影响,对儿童进行正确教育的策略。1.儿童电视节目存在暴力元素的现状传
会议
在"互联网+"领域,电力网络已成为至关重要的一部分。当前电力无线网、分布式管理系统等的广泛运用,不断改善与优化我国电力网络,大幅提升其信息化水平。近年来,虽然电力网络的功能越来越强大,但其在安全方面仍面临着严峻的挑战,传统的安全防御技术已不能满足当前的发展需求,需要企业积极应用先进的安全防御技术。在"互联网+电力"背景下,科学合理地运用包过滤与数据挖掘,以此构建完善的主动防御系统,进一步优化
期刊
本文以全球流动性与短期跨境资本流动为切入点,首先从理论层面分析了全球流动性水平对短期跨境资本流动的影响途径,以及两者对我国金融市场的可能冲击。通过TVP-SV-VAR模型探究二者对我国金融市场的外溢冲击效应,结果表明:全球流动性增速加快会带动短期跨境资本流入我国,影响程度随滞后期限变长而逐步减弱,且在正常时期的影响程度要大于在2008年及2020年的危机时期;全球流动性增速水平与短期跨境资本流动对
学位