层间特征融合与多注意力的图像修复算法研究

来源 :兰州理工大学 | 被引量 : 1次 | 上传用户:lzzwj
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像修复是图像处理领域的基础问题,旨在构造满足人类视觉感知的目标图像。由于在采集、传输以及保存过程中诸多因素的影响,导致无法获取图像原本包含有的全部信息,进而影响人类对图像内容的分析和理解。图像修复技术研究目标是根据输入图像已知区域的先验信息,推测重建出缺失区域的内容过程,使得被填充区域的内容看起来具有视觉观赏性同时不易被人察觉。随着人工智能的时代来临,驱动着图像修复技术在各领域的迅速发展,在文物修复、图像编辑、公安刑侦以及遥感卫星图像等领域有着广泛的应用前景。作为图像处理的不适定问题,图像修复的研究面临一些问题和挑战。在图像修复过程中,对待修复图像的内容理解十分重要,不同于人类视觉感知系统,计算机很难直接理解图像内容。针对复杂纹理和大面积缺失的图像,很难用一个模型去描述缺失部分的内容。本文在掌握了深度学习、注意力机制、小波变换等理论的基础上,重点围绕图像修复在内容理解存在部分信息丢失和特征自身关联性弱的问题,提出了有效的图像修复方法,主要的研究内容及相关贡献归纳如下:1.分析了基于深度学习的图像修复方法的机理,并研究了注意力机制模型,同时给出了图像修复方法的常用数据集以及质量评估方法,为本文的方法研究和实验分析奠定理论基础。2.提出了基于层间特征融合的图像修复算法。针对基于上下文注意力机制的图像修复算法仅利用单一层图像特征建立上下文注意力层,导致图像修复结果出现一些部分信息丢失的问题,探究了上下文注意力机制的原理后,依据该理论并结合不同层之间的特征,同时利用多尺度融合的方法,解决了图像修复中部分信息丢失的难题。此外,联合边缘特征并引入了边缘对抗损失,提高对图像特征的约束能力,最终提出基于层间特征融合的图像修复框架。实验验证了该方法的有效性。3.提出了基于多注意力的图像修复算法。针对基于上下文注意力机制的图像修复算法仅通过注意力机制算法建立破损区域与已知区域之间的联系,忽略特征自身的联系,导致图像的待修复区域信息模糊的问题,充分利用自注意力机制关注特征自身的特点,引入了通道注意力机制模型,建立特征通道维之间的关联性。另外,联合小波变换的特性以优化修复网络性能。最终提出了基于多注意力机制的图像修复方法,实验结果验证了该方法的有效性。
其他文献
概念设计是一种设计思维,是一种从整体出发的布局方式,更加合理的维护了建筑整体结构和分体系之间的内在关系,协调了建筑结构中存在的一些问题,提高了建筑结构设计的优越性。
目前国内在建的两个大型拱坝,乌东德和白鹤滩地处云南,四川交界处,河谷狭长,气候炎热,属于典型的干热河谷气候,施工过程中常常出现混凝土坯层表面水分蒸发过快,骨料泛白,大大
印尼汉语教育曾经停滞三十余年,对全国范围的汉语教育都造成严重的影响。经过了二十多年的努力,汉语教育已取得长足的进步,但与东南亚其它地区相比仍比较薄弱,而且地区间发展不平衡,有必要对不同地区的汉语教育进行全面而深入的调研,有针对性地提出相应的策略来推动当地的汉语教育发展。三宝垄作为中爪哇的首都,是全中爪哇汉语教育发展较好的地区之一,汉语教育的地位较为重要。汉语教育的不同阶段都有一定程度的发展,而小学
驾驶自动化对于减少由驾驶员操作失误所导致的交通事故具有重要意义,近年来受到人们越来越多的关注。虽然在科技发展的推动下,无人驾驶技术取得了很大的进步,但仍然存在很多
直接甲醇燃料电池(DMFC)作为一种可将化学能直接转化为电能的电化学装置,具有能量密度高、结构简单等优点。其中,可加速其电化学反应动力学过程的Pt基催化剂,是DMFC的核心组成,
植物和昆虫在地球上相互作用超过4亿年。植物产生有毒植物次生代谢物以减少植食性昆虫的侵害,而昆虫也相应地进化出了细胞色素P450单加氧酶等多种解毒代谢机制。斜纹夜蛾(Spo
根据《最高人民法院关于适用〈中华人民共和国公司法〉若干问题的规定(四)》(下称“《公司法解释四》”)的规定,决议成立之诉正式作为决议瑕疵诉讼的救济方式被法律规定下来,
钱理群的鲁迅研究呈现出独特的话语方式、情感方式和思维方式。他对鲁迅的研究,从思想的契合到心灵的交融具有鲜明的主体诉求,包括对压制和围困的反叛、对个体精神自由的彰显、对精神意志力的强调等。动荡时代的经历赋予他独特的思想体验、情感特征和历史性格,个人生命体验的投射使其鲁迅研究具有对话性的特征。从钱理群鲁迅研究的内容入手,讨论其鲁迅研究的特点,并阐释这特点背后的形成原因。讨论其个人经历、学术历程和与时代
桥梁结构主梁横向移位和落梁的震害现象在国内外的桥梁震害调查中十分常见,而横向抗震挡块是防止主梁横向位移和落梁的重要构件之一。我国现行桥梁抗震设计规范对抗震挡块尚
在经济全球化浪潮的国际形势背景下,资本活动早已打破了要素流动的国别边界,对外直接投资活动活跃在世界舞台。中国自2001年加入世贸组织以来,积极奉行“走出去”战略,2013年在合作共赢理念的引领下,提出并实施“一带一路”战略合作倡议,力图共商、共享、共建。但中国对“一带一路”沿线国家的直接投资规模占中国对外直接总投资的比例较小,投资行业也大多集中在资源开采、基础设施建设等传统行业,制度距离是导致这一