基于样本和深度学习的图像修复方法研究

被引量 : 3次 | 上传用户:livebody
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
数字图像修复因其在图像、视频编辑等方面的广泛应用,成为了计算机视觉领域的一项重要研究内容。它是对图像或视频中信息缺损区域进行信息填充的过程,其目标是尽可能地保证修复质量,使观察者找不出修复的痕迹,也就是保证修复结果中含有合理丰富的细节信息并保持整体结构的连贯性。数字图像修复的有效途径是在修复过程中引入关于图像的先验信息,利用数学方法建立先验模型,并依据先验模型求解缺失区域的信息。目前该领域已经有很多方法被提出,主要包括基于变分PDE模型的方法、基于样本的方法、基于变换域的方法、基于深度学习的方法等,其中基于样本的方法在大区域破损图像修复中取得了较好的结果,新兴的基于深度学习的方法在图像语义修复中取得了好的结果。为了充分利用不同方法的优点,基于图像分层处理后的混合方法也被广泛研究。本文将围绕这三类具体方法中的关键问题展开研究,并针对各类方法存在的一些问题提出了相应的改进算法以提升图像修复的质量。主要工作如下:(1)提出了一种基于样本块偏移匹配的图像修复方法,该方法针对传统的基于样本块匹配方法因匹配错误累积容易造成修复结果失败的问题,通过两方面的策略进行改进。首先在样本块优先级确定时,仅计算样本块的数据项以确保修复结果中结构特征的连贯性,同时通过标记方式使修复过程沿破损区域由外向内逐层修复以保证修复过程的可信度。其次,对高优先级的样本块进行块偏移,避免存在大量未知像素点的样本块被处理,减少了因匹配错误造成错误的不断累积。实验结果表明该方法在复杂场景图像修复时,特别是存在大区域信息缺失时,可以在实现图像中主要结构连贯修复的同时,很好地修复图像中的纹理细节。(2)提出了一种基于多损失函数训练的深度学习图像修复方法,该方法基于卷积自编码器深度学习网络实现图像的修复,在网络结构中添加编码-解码对应层间的跳跃式连接为修复区域生成提供更多的底层图像特征,在网络的训练过程中包含了2L距离损失、修复区域对抗损失及修复后整个图像的对抗损失以确保修复后图像具有全局一致的视觉特性。实验结果表明该方法一方面具有深度学习修复方法本身具有的高层语义修复能力,另一方面可以使修复结果中的轮廓结构和细节信息更加合理。(3)提出了一种自适应局部拉普拉斯滤波器用于图像保边细节处理。首先,该方法通过改进的高斯核加权扩展拉普拉斯算子提取图像局部变化表示,其次,通过获取的表示自适应地设置局部拉普拉斯滤波器的参数进行图像滤波处理。实验结果显示该方法在图像细节平滑、图像细节增强等应用中取得了好的结果。(4)提出了一种基于图像结构成分计算样本块优先级的方法。该方法在自适应局部拉普拉斯滤波器对图像结构成分和纹理细节成分分层处理的基础上,对基于样本块匹配图像修复方法中的数据项计算方法进行改进,即通过原图像和分解得到的图像结构成分加权计算数据项的值,实验结果显示通过这种策略可以提高数据项对结构特征的表征,使修复结果图像中的结构特征更加连贯。
其他文献
电子商务课程具有高度的创新性与实践性, 对培养学生的创新创业能力具有先天的优势和良好的教学效果, 电子商务课程实践教学改革对高校创新创业教育目标的实现有着深远而积极
<正>人物名片张四玲,民进会员,永州市政协委员,湖南省第十二、十三届人大代表,湖南省百名最美扶贫人物,全国巾帼建功标兵。获2018年度"全国三八红旗手"称号。在湘南一个偏远
目的 通过对宁养院患者服务前后疼痛治疗效果、生活质量、一般状况的调查对比,探讨家居止痛治疗对中晚期癌症患者的最佳服务形式、服务效果,以期进一步提高癌症患者的生活质
目的探讨网络支持干预方法对乳腺癌术后患者疾病不确定感的影响。方法采用便利抽样法,抽取复旦大学附属肿瘤医院乳腺外科行乳腺癌手术且出院的患者119例为研究对象。其中干预
<正>骨肉瘤好发于青少年。其临床特点是恶性程度高,早期即可发生肺转移,单纯手术治疗5年生存率仅约20%。近20年以来,化疗明显提高了骨肉瘤患者的5年生存率,但是肿瘤细胞对化
目的评价面对面授课、电话交谈和自学3种干预模式在轻度认知功能障碍(MCI)患者中的应用效果。方法将北京市某三甲医院神经内科记忆门诊就诊的90例MCI患者,按随机数字表法分为
全膜双垄集雨沟播是我国旱作农业上的一项创新技术。该技术因集覆膜垄面集雨沟播、覆盖抑蒸和增加土壤温度为一体,在半干旱黄土高原地区玉米种植中增产效果突出而被大面积推广。但是目前该技术连续使用下土壤肥力的可持续性及其调控途径不清楚。通过将田间实验与土壤有机碳的物理分组技术相结合,研究全膜双垄集雨沟播对土壤有机碳库的影响,来评估将秸秆还田纳入全膜双垄集雨沟播玉米种植体系的可行性。实验地点位于甘肃省榆中县小
期刊
工信部8月1日发布2017年第二季度电信服务质量通告。报告显示,截至二季度末,全国电话用户总数达到15.65亿户,其中移动电话用户13.65亿户。
(一) 目前,我国儿童福利院对儿童照顾模式还部分地承袭了传统的大集体机构化抚养做法,虽然满足了儿童衣、食、住等基本生存需求,但其客观局限性,使儿童,尤其是那些身体功能