基于生成式对抗网络的图像修复方法研究

来源 :河北工业大学 | 被引量 : 0次 | 上传用户:happysanban
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在计算机视觉和数字图像处理领域,图像修复技术一直是众多科学家研究的热点内容。当图像破损区域较大或已知区域中无可利用信息时,修复结果就会不尽人意。近年来,深度学习的高速发展为图像修复任务带来了新的解决途径。本文主要研究基于生成式对抗网络的图像修复算法,针对图像破损面积过大影响修复效果的问题,并根据图像破损具体状况进行针对性改进,具体工作如下:(1)针对规则破损图像的修复问题,以提升图像修复质量、增强生成对抗网络训练稳定性为目标,提出了一种基于双判别网络的规则破损图像修复方法。生成器模块引入区域归一化替代传统归一化方法,解决无效像素在归一化过程中产生的均值和方差漂移问题,并在中间层使用扩张卷积增大感受野,进一步提升生成图像质量;同时使用马尔科夫判别器融合全局与局部双判别网络组成高效判别网络,提升模型训练效率的同时兼顾修复图像全局与局部修复区域的细节纹理;损失函数使用重建损失缩小生成的图像与原始图像的像素差异,增加TV损失解决修复边界问题,引入RSGAN对抗损失替换原始GAN对抗损失,增强训练过程的稳定性。在大型公开人脸数据集Celeb A上,针对不同规则破损情况分别进行图像修复实验,结果表明,相较于GL算法、PC算法和RN算法,本方法显著提高了规则破损人脸图像的视觉修复效果,峰值信噪比和结构相似度上至少分别提高了0.50 d B和0.010。(2)针对不规则破损图像的修复问题,以优化图像修复效果、提高生成对抗网络训练效率为目标,提出了一种基于部分卷积的不规则破损图像修复方法。生成器模块在上一方法基础上,使用改进后的部分卷积替代经典卷积,保证无效像素与有效像素在卷积、归一化操作过程中完全独立又不会相互影响,进一步提升图像生成质量。判别器模块针对待修复图像不规则破损的特点,提出联合马尔科夫判别器与全局判别网络的GPGAN判别器,兼顾修复图像的各处细节纹理与整体全局效果。使用改进后的重建损失,提升生成的图像与原始图像的相似程度,使用生成对抗损失提高修复效果的真实性。在大型公开人脸数据集Celeb A与小型公开汽车数据集Cars上进行了破损图像的修复实验,实验结果相比CE算法、PC算法和RN算法,有效提升了修复图像的视觉效果,其中峰值信噪比提升了0.08-1.50d B,结构相似度提升了0.004-0.033,表明该方法进行复杂破损图像修复工作的有效性和用于不同数据集的通用性。
其他文献
<正>近年来,浙江省宁波市多维发力,在村集体经济发展方面取得了较好的成效。截至2021年底,全市行政村实现总收入30万元以上、经营性收入15万元以上全覆盖。近日,笔者对宁波市农村集体经济发展进行了调研,以下是调研成果。一、发展的主要做法一是健全工作体系。构建市、县、镇、村四级联动的促进村集体经济发展壮大组织领导体系,签订工作责任书,将发展壮大村集体经济工作纳入对各级党政领导班子及主要领导干部实绩考
期刊
<正>案件管理工作是推动“四大检察”“十大业务”高质量发展的重要手段和方式,全面提升法律监督质量和效果离不开优质高效的案件管理工作。本文分析案件管理工作中存在的问题,提出能动管理的对策和建议,以期为全面提升检察机关案件管理工作质量建言献策。一、案件管理工作基本情况案管部门强化对各项业务工作的监督和管理,充分发挥“管理、监督、服务、参谋”职能,为推动案件质效提升发挥积极作用,但在案件管理过程中也存在
期刊
军民融合不仅能够推动经济与军事协同发展,还能够在处置突发事件时,实现优势互补。科学规划军民双方应急救援力量,快速高效地响应应急需求,对于我国应急救援研究具有重要的现实意义。论文以提升震后灾民安置效率为研究内容,选取了影响灾民安置效率的应急疏散和物资调度两个重要环节,结合军民救援优势差异,设计了不同环节所对应的军民融合协同救援机制。论文深入研究了从众行为对震后应急疏散效率的影响,并根据论文所设计的协
学位
当前全球环境污染和气候变暖正日益严重,开发具有高催化活性、高选择性的催化剂是有效利用清洁能源从而解决上述问题的重要途径。共价有机框架(COFs)是一类结构可设计、功能可调节的新型催化剂。本论文以实验报道的COF-366-Co为原型构建一系列二维COFs单层催化剂,根据其金属中心周围氮原子配体的数量分别命名为M-N4-COFs和M-N5-COFs。采用第一性原理计算系统研究了M-N4-COFs和M-
学位
当今时代,随着汽车制造行业不断迎来新的发展,汽车零部件的市场需求也变得更加多样化。各大汽车零部件制造企业为迎合市场需求,不断引进自动化的生产机器设备和先进的生产线,已从手工制件阶段过渡到机器生产阶段,这也使得企业产品成本的结构悄然改变,制造费用在产品成本中所占的比重愈来愈大,单纯地按照产量或工时分配制造费用的成本核算方式已经逐渐趋于滞后,无法真实准确地反映出产品的成本信息。基于此点,汽车零部件制造
学位
为克服通信基础设施重复建设和资源浪费问题,二零一四年七月国务院办公厅批复组建了中国铁塔股份有限公司。天津铁塔作为中国铁塔的省分公司,承担了天津全部的通讯基础设施工程建设和维修工作。对天津铁塔来说,巨大而且分散的固定资产投资并不方便管理,如果管理上稍有不慎,这样巨大的投资反而会成为公司经营的负担,最后由于成本劣势而拖垮公司。此外,其收入也随着运营商需求而定,同时随着通讯产业的蓬勃发展,三大运营商在通
学位
选矿厂提取铁矿石中有用的组分后会排放大量的铁尾矿,这些铁尾矿不仅占据大面积土地,而且对周围的环境造成了不可忽视的负面影响。铁尾矿中含有丰富的硅元素和少量铝、铁元素,是潜在的二次资源。本文以铁尾矿为原料,采用溶胶凝胶工艺和常压干燥工艺制备二氧化硅气凝胶,研究了溶胶凝胶和常压干燥流程中的工艺参数变化对二氧化硅气凝胶比表面积的影响,并结合对亚甲基蓝和孔雀石绿的吸附实验,考察了二氧化硅气凝胶的吸附性能。主
学位
<正>目前,随着生活水平的改善,高脂肪饮食摄入增多,导致糖尿病的发病率持续上升,高血糖及其所致的各种并发症严重影响患者的生活质量。糖尿病基础上合并骨骼系统损害的全身代谢性骨病称为糖尿病性骨质疏松,是糖尿病导致的严重并发症之一[1]。糖尿病患者易发生骨矿含量减少、骨密度降低的情况,但由于早期临床症状不明显而易被忽略。骨质疏松已成为糖尿病患者致骨折、致残的重要原因[2]。胰高血糖素样肽(GLP)-1受
期刊
设施农业现代化已成国家农业发展的重要组成部分,设施环境调控作为设施农业中的关键技术也取得了飞速的发展。温室调控技术可以提高作物品质、提升资源利用率、改善作物生产条件,实现温室作物的高效优质生产。目前以番茄为研究对象进行温室调控的研究取得了很大的进展,但是仍存在调控精度较低、多因子耦合调控较少,且往往是对作物的固定生长时期进行调控决策优化,难以实现全生长期跟踪调控。针对存在的问题,本文结合智能优化算
学位
金属卤化物钙钛矿光电器件以其优异的光电性能和低廉的制造成本受到广泛关注。高质量的金属卤化物钙钛矿晶体是高性能钙钛矿光电器件的关键。目前通用的制备金属卤化物钙钛矿晶体的有效方法是溶液法,但是通过溶液法制备的晶体的质量仍有很大的提升空间,亟需进一步了解晶体的形核及生长机制。采用数值模拟技术,建立金属卤化物钙钛矿晶体溶液法生长的数值模型,对晶体的生长过程进行模拟,探索其形核及生长机制,研究其微观组织演变
学位