基于深度学习的图像超分辨率重建算法研究

来源 :南京大学 | 被引量 : 0次 | 上传用户:bdysh
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像作为最常见的信息形式之一,被广泛应用于各行各业。图像的分辨率是衡量其所含信息量的重要参数,然而在实际应用中图像的分辨率通常难以满足需求,因此图像超分辨率重建算法应运而生。图像超分辨率重建算法的目标是从低分辨率图像高效地重建出高分辨率图像,其凭借灵活性强、实现成本低等优势,正逐渐成为热门的研究方向。随着深度学习的发展,基于深度学习的图像超分辨率重建算法正表现出强大的重建性能,而这类算法几乎都以构建卷积神经网络的方式实现端到端的图像重建,因此网络的结构在很大程度上决定了算法的重建性能。本文探索用于图像超分辨率重建任务的卷积神经网络的结构设计,致力于高重建质量和高重建效率的图像超分辨率重建网络的研究,主要工作如下:首先,为了更好地学习和利用不同的层次化特征从而恢复出更多的细节信息,本文提出一种快速且准确的深度分形残差网络。该网络以分形规则建立分形块,分形块中含有多条不同的特征提取路径,从而可以提取不同的层次化特征并通过融合操作将其充分地利用。同时,网络中引入全局和局部残差学习,充分保留了低层次的图像特征并降低了网络训练的难度。此外本文还提出了一种权重共享的模型,在几乎不影响重建表现的情况下显著减小了模型的参数量。实验表明,本文提出的网络可以有效地提取各种层次化的特征,并在多个公共数据集上表现出良好的图像超分辨率重建性能。其次,为了进一步降低模型规模并提高网络重建性能,本文从感受野和频率信息的角度出发,提出一种轻量化的图像超分辨率重建网络。该网络使用反亚像素操作对特征图的空间尺寸进行变换,在提高网络对不同频率信息的特征提取能力的同时显著减小了网络的计算量,从而兼顾了重建性能和模型规模。为了进一步压缩模型规模并提高实用性,本文采用多尺度方式构造和训练网络,从而单一模型可适用于不同缩放因子的重建过程。该网络在重建质量和模型规模之间实现了更好的平衡,提高了重建效率且在重建指标和视觉质量上仍有很好的表现。最后,本文提出一种轻量的注意力机制,并基于该注意力机制设计了名为残差密集注意力网络的图像超分辨率重建网络。该注意力机制融合了通道注意力以及全局/局部空间注意力,能更好地关注特征图的不同通道和不同空间位置,从而有助于凸显对重建过程更重要的信息。此外,网络中引入了残差学习和密集连接结构从而更好地保留浅层提取到的特征并实现特征复用。本文提出的注意力机制能以很小的额外计算量和参数量为代价显著提升网络的重建性能。同时相比于相近规模的网络,本文提出的网络具有更优秀的重建表现,能应对更复杂的重建任务,恢复出更多更准确的图像细节。
其他文献
大数据时代,数据量快速增长,数据形式千变万化。异构信息网络作为常见的数据形式之一,出现在生活的方方面面,如:点评信息网络、文献信息网络、电影信息网络等。异构信息网络规模大且结构复杂,包含了丰富的信息,如何对其进行表示是挖掘其潜在价值的关键。近年来,异构信息网络表示学习成为了研究热点,其目标在于用低维、稠密且蕴含丰富异质信息的实值向量表示异构信息网络中的节点,并将得到的节点表示向量应用于后续的数据挖
微量元素作为一种必需的营养素,几乎参与了动物所有的生理生化活动,是肉鸡饲粮中必不可少的饲料添加剂。但是无机盐微量元素存在易被氧化、利用率低、容易破坏其它饲料组分和添加量大造成环境污染等缺陷。有机微量元素虽然有较高的利用率,但其生产成本较高且缺少统一的标准,在实际生产中的应用受到很多局限。而包被微量元素由于有一层特殊的防护包膜,避免了其与某些活性物质发生反应,提高了微量元素的利用率,减少了对环境污染
比卡鲁胺是由英国阿斯利康为原研企业生产的一个较新的非甾体类抗雄激素药物,其具有耐受性良好、口服服用效果明显,特异性强而且不良反应少等特征,临床上主要用于晚期前列腺
随着经济的蓬勃发展,人们的消费水平及对产品与服务的要求也逐渐提高,企业间的激烈竞争已经不再是有关市场份额的竞争,而是逐渐转向对顾客资源的抢夺。企业需要了解顾客的购
当前我国实施以成本保险为主的农业保险政策,仅承保由于自然灾害发生引起的农作物减产损失,不能对因农产品价格波动造成的农户收入损失进行保障,随着市场经济的进一步发展,其保量不保价的缺陷越发明显,不能真正意义上维持农户收入稳定性。收入保险以收入为保险标的,能够同时覆盖产量及价格风险,具有更广泛的风险覆盖面,目前已成为世界各国发展农业保险的趋势。因此,我国学者开始对收入保险进行研究,以满足人们日益提高的风
位置服务已成为大量新兴技术不可或缺的基础功能,在国民经济和人民日常生活中发挥了举足轻重的作用。目前,室外定位系统在技术上日趋成熟,被广泛地应用于定位导航和同步授时等领域;室内定位技术的研究也逐渐深入,在智慧仓库物流、特殊人群监护、紧急安全救援和旅游景点引导等方面发挥着重要的作用。随着5G技术的飞速发展,在人群密集的大型室内场所的目标寻路和人群疏导等场景下,基于5G的室内导航等位置增值服务的需求不断
《红楼梦》作为中国古代文学四大名著之首,是西方国家了解中华文化的重要渠道,其不同译本的出现引起了诸多译家学者的广泛关注。《红楼梦》小说艺术的一个奇特点是诗词曲赋贯穿在整个故事情节中,对人物形象塑造,人物情感传递发挥了重要的作用。因此,诗歌的翻译对衡量《红楼梦》译本有一定的价值导向。诗歌语言凝练、音韵和谐、极利于传情达意,然而其诗体的丰富性及语言的特殊性对译者再现原诗音韵特征、传译原诗情感造成了极大
在图像细节增强中,为了改善图像的视觉效果,希望增强图像的高频分量,突出图像的纹理信息,同时平滑图像的低频分量,传统的图像细节增强算法,不能很好地解决增强图像纹理细节的同时去除图像噪声的矛盾。本文以分数阶微积分理论为基础,利用分数阶微分算子具有弱导数性质的优点,将其应用到图像细节增强领域中,分数阶微分使增强后的图像在突出纹理细节的同时非线性的保留图像中的平滑区域,使图像细节得到锐化,达到更好的视觉效
机载雷达的平台系统安装在载机上,因而具有视线宽阔、调整灵活等优点,因此得到了广泛的应用。但是由于机载雷达下视工作的强地物杂波,并且机载雷达的杂波具有空-时耦合的特性,所以只从时域或空域进行杂波滤除难以有效抑制,目标信号被完全淹没在强杂波的背景之下而难以检测。因此机载雷达要实现运动目标检测(Motive target detection,MTD)首先要解决的重要难题就是杂波抑制问题,而空时自适应处理
随着大数据时代的到来,推荐系统变得越来越重要。从大量输入特征中发掘与标签相关的交叉组合特征是推荐系统算法研究的一个重要方向。目前,业界发掘交叉特征的主要方法为统计机器学习算法。基于此,本文重点研究了推荐系统中不同算法发掘交叉特征的机制。本文使用交叉特征规则生成数据集进行实验。实验对象包括目前推荐系统领域的一些主流算法,目的是探究其交叉特征发掘的性能、原理和可解释性。实验结果表明目前的一些主流算法在