基于无监督学习的真实世界超分辨率算法研究

来源 :福州大学 | 被引量 : 0次 | 上传用户:a13456400000
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
超分辨率简称超分,是计算机视觉中的经典任务,其目的是重建低分辨率图像中丢失的高频信息。在过去几十年间,我们见证了超分技术快速发展的历程。特别是深度学习技术的进步,极大地促进了超分领域的发展。目前,超分技术被广泛应于众多领域中。尽管如此,基于深度学习的超分模型需要配对的高—低分辨率图像对来进行训练。然而,在真实世界中,这样的配对图像通常存在获取难度大、获取成本高的问题。为解决这个问题,研究者们通常利用高分辨率图片与其下采样的低分辨率图片去训练超分模型。纵然这样训练出来的模型能够在公开测试集中取得较好的性能,但面对真实世界中的低分辨率图像时,其性能将会急剧下降。除此之外,目前高精度超分模型的时间复杂度和空间复杂度普遍偏高,需要占用大量的计算资源和存储资源。为解决上述问题,本文提出一种基于无监督学习的超分辨率系统解决方案。该方案分成两部分。第一,利用生成对抗网络域映射无监督方案实现真实世界高—低分辨率的图像对生成,以解决真实世界配对图像难以收集、传统获取的配对图像训练的模型效果差的问题。第二,利用生成对抗网络的模型压缩方案,将训练好的高精度、高时空复杂性的教师网络的超分知识迁移到低时空复杂度的学生网络中,利用学生网络来进行超分辨率推断,以减少计算与存储资源的压力。在真实世界图像对生成阶段,本文提出了一个有效的无监督域映射网络,该网络以颜色注意力机制残差块(Color Attention Residual Block,CARB)为基础模块,能够有效地缓解域映射过程中的颜色偏移,高效地生成配对的真实世界高—低分辨率图像。在训练超分模型和模型压缩中,本文首先提出了一个以密集嵌套残差注意力模块(Residual-in-Residual Dense Attention Block,RRDAB)为基础模块的超分网络,它能够有效地增强超分辨率性能。其次,本文设计了一个高低频解耦的判别器,能够进一步提升超分性能。与此同时,本文引入了边缘损失函数来缓解生成对抗网络产生的假纹理现象。最后,通过生成对抗网络的知识迁移能力,将教师网络的性能传递给学生网络,以实现低时空复杂度高性能的推断。大量的实验表明,本文的真实世界超分方案能够高效且高性能地超分真实世界中的图片。
其他文献
高k氧化物作为一种性能优良的新型介电层材料,在电子器件中应用广泛。氧化铝(Al2O3)薄膜和二氧化铪(Hf O2)薄膜具有很高的k值、较好的化学稳定性、热稳定性以及较大的禁带宽度,是十分有潜力的高k材料。制备这两种薄膜的方法,目前主要是原子层沉积和化学气相沉积等工艺,这些方法生长的薄膜质量较高,但是需要真空环境和昂贵的设备。本文使用化学液相沉积法制备氧化物薄膜,化学液相沉积法是一种工艺简单、成本低
学位
神经形态计算可以实现计算中心和存储中心一体化,能够提供一种速度快、效率高、能耗低的并行数据处理方式,有望成为下一代计算机体系。研发能够模拟生物突触学习与记忆行为的人工突触器件是实现神经形态计算的关键。忆阻器的阻值受到流经的历史电流所控制,这一特性与生物突触可塑性相似,因此被广泛应用于人工突触器件制备和神经形态计算研究当中。到目前为止已有多种材料体系被应用于人工突触器件的开发,比如氧化物、二维材料、
学位
柔性铜锌锡硫硒(CZTSSe)太阳能电池因可弯折便于携带而拥有更广阔的发展前景,但柔性CZTSSe太阳能电池效率的提升受到背界面问题的制约,其主要原因是在高温硒化过程中CZTSSe与Mo之间发生分解反应,在界面处产生二次相、孔洞等,并生成较厚的Mo Se2层,使得空穴易于被复合损耗而难以传输至背电极。本论文将系统研究柔性CZTSSe太阳能电池背界面问题,改善背界面接触。针对柔性CZTSSe太阳能电
学位
近些年,信息技术不断推陈出新,给我们的社会、经济以及生活带来了前所未有的变化。在信息化浪潮的推动下,网络数据呈现爆发式的增长,信息过载的问题逐渐凸显出来,此时,最大限度地提高这些资源的利用率显得尤为重要。为了解决上述问题,越来越多的研究开始关注利用个性化推荐技术向用户提供他们真正想要的信息,避免用户浪费过多的时间在不必要的信息搜寻工作上。本文在个性化推荐技术的基础上,引入知识图谱作进一步的研究,并
学位
动静脉分离有助于肺部疾病的早期筛查与病理状态诊断,为肺部手术的术前规划、术中导航、术后评估等提供有效的参考,具有重要的临床意义。动静脉在CT图像上灰度和形态十分相近且部分动静脉分支相互黏连,而且一例肺部CT影像序列可包含数百层影像,熟练的医师重建一例患者动静脉一般需要耗时数个小时,过程繁琐复杂且容易出错。若能通过计算机辅助的方式自动、快速、准确地分离出动静脉血管树,可以减轻医生的工作量,合理规划肺
学位
近年来,高清视频监控得到了广泛应用。对视频中人体的异常行为进行自动识别可切实有效地保护人身及财产的安全,因此具有重要的应用价值。常见的人体异常行为识别方法主要通过提取运动目标的特征来进行建模。然而,实际监控场景存在背景复杂、运动目标数量不固定、异常行为的定义与具体的应用场景有关难以统一界定等各式各样的问题,增加了对人体异常行为识别的难度,使人体异常行为识别成为具有挑战性和研究意义的任务。本文设计一
学位
语义分割作为计算机视觉领域的热门研究课题,目标是对图像中的每个像素点进行正确分类。然而,现有的分割数据普遍存在像素分布不平衡的问题,即类别间的像素分布呈现“长拖尾”现象。这将导致训练模型仅在极个别样本集中的类别上表现突出,而大多数类别性能欠佳,整体精度受限,严重阻碍了多分类分割的应用化进程。本文首先针对普通场景语义分割中的像素分布不均问题开展研究,提出了一种基于数据层面和算法层面的非均衡数据分割方
学位
近年来,随着民用无人机技术的不断发展,无人机的应用场景越来越广泛。围绕无人机的组合导航算法,众多研究者进行了深入研究,并取得了诸多显著成果。然而,目前大部分无人机系统在工作时仅采用GPS全球定位系统实现自定位。当无人机位于高层障碍物附近,或位于强电磁干扰区时,GPS信号可能丢失,从而导致无人机定位信息失效。因此,急需一种能够在无GPS信号条件下可靠、实时、稳定、高精度地为无人机提供定位数据的无人机
学位
量子点(quantum dots,QDs)具有优异的光电特性、可靠的光稳定性以及普遍较高的荧光量子产率,兼具高性能和低成本的量子点在光学防伪标签领域具有广泛应用前景,是一种理想的发光防伪材料。本文根据使用的不同量子点材料的特性,采用了喷墨打印、丝网印刷和光刻工艺分别对量子点墨水、量子点粉体和原位合成的钙钛矿量子点制备的薄膜进行了图案化处理,并对图案化的薄膜的形貌结构、发光特性进行了表征,实现了不同
学位
随着科技的高速发展,自动驾驶技术与高级辅助驾驶系统成为了各国研究的热点,车道线检测则是自动驾驶技术与高级辅助驾驶系统的重要组成部分,具有许多值得研究的问题。由于不同复杂交通场景之间差异较大,拥挤场景会出现车道线被遮挡,光照条件不好会造成车道线模糊等问题,使得现有的车道线检测方法在实际应用时,存在准确性与鲁棒性等方面的不足。针对以上问题,本文在福建省与福州市重点科技项目(2018H0018,2020
学位