基于生成对抗网络的遮挡目标识别

来源 :中国矿业大学 | 被引量 : 0次 | 上传用户:layueee
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
遮挡目标识别在人工智能领域扮演着极其重要的角色,而解决遮挡目标识别问题中最关键的一步是图像修复。图像修复是一项艰巨的任务,是图像研究领域中能够改善图像质量的一种处理技术,它需要根据图像已有数据去还原图像中损坏的区域。在实际的图像获取中,由于多种受损噪声,光线强暗及实物遮挡等因素,造成了图片质量严重下降。因此图像修复研究意义极为重要。生成对抗网络(Generative Adversarial Networks,GAN)是一种借用对抗思想提出的神经网络架构,是人工智能时代最有发展前景的无监督学习模型之一。本文借助GAN的对抗思想,设计受损图像的修复方法,融合挤压激励块(Squeeze-and-Excitation Networks,SENet)和自注意力机制(Self-Attentive,SA)在特征提取上的优势,对图像修复的细节进行探究,使得在整个图像修复的过程中计算效率和修复结果更好。本文主要完成以下工作:首先,提出了一种基于挤压激励块的深度卷积生成对抗网络遮挡图像修复模型(Occlusion Image Recognition by Deep Convolution Generative Adversarial Networks based on Squeeze-and-Excitation Networks,SE-DCGAN)。对深度卷积生成对抗网络的结构进行重新设计,在生成模型的第三层卷积和第四层卷积层中融合挤压激励块,使得深度卷积生成对抗网络中的卷积层提取的特征更加精确。另外,SE-DCGAN引入具有强大拟合功能的Maxout激活函数,以提高图像生成效率并避免图像生成冗余。在CelebA、SVHN和动漫头像三个数据集上的仿真实验结果表明,该模型成功预测了大量缺失区域,并在视觉清晰的内容中实现了连贯的图像恢复,尤其是提高了被遮挡脸部的识别率。其次,提出了融合自注意力机制和条件Wasserstein生成对抗网络的遮挡图像修复模型(Self-Attention Mechanism and Conditional Wasserstein Generation Adversarial Network’s Occlusion Image Repair Model,SACWGAN)。条件Wasserstein生成对抗网络的生成器借助于自注意力机制更加关注数据和特征内部之间的关系,将条件标签当作输入来完成修复工作。在数据集CelebA和AR数据集上,通过可视化展示和两个重要评估指标(PSNR和SSIM),验证了SACWGAN在处理遮挡任务时的有效性。在此基础上,结合SENet在神经网络结构中有效捕获图像关键特征的能力,提出了融合挤压激励块和自注意力条件Wasserstein生成对抗的遮挡图像修复模型(SE-SACWGAN)。该模型利用挤压激励块的关键特征捕捉能力,提升了自注意力条件Wasserstein生成对抗网络的遮挡图像修复效果。最后,设计了基于SE-SACWGAN的遮挡图像识别原型系统。基于Django框架设计出视频图像修复演示系统,采用帧截取的方式获取动态视频中的受损区域并进行修复。本文对实际拍摄的受损视频进行修复演示,并对遮挡修复效果进行总结。该论文有图33幅,表18个,参考文献89篇。
其他文献
自贝卡里亚于1764年在其名著《论犯罪与刑罚》中首倡废除和限制死刑的主张以来,死刑存废之争已达近两个半世纪之久。时至今日,死刑存废问题仍然是中国刑事法治领域的热点话题
会议
目的评价美学区拔牙位点保存与同期行引导骨再生术(GBR)种植修复的红色美学效果。方法随机选取2015年9月至2017年3月就诊于新疆医科大学第二附属医院口腔科美学区牙列缺损患
现阶段,民众生活水准的逐步提升催生了其日渐高涨的精神文化需求,表现在旅游方面,即个性化、多元化的旅游需求不断涌现。传统旅游模式对游客的吸引力开始下降,具有创新性的民
电化学是高中化学知识的重要组成部分,对学生学好化学学科起着至关重要的作用。对学生而言,此部分难度较大,也是问题暴露较多的板块,因而完善电化学板块的复习策略就显得尤为重要。由于电化学知识“繁、多、杂”的特点,就学生而言,若无法构建系统的知识框架,就会出现知识混乱等问题。三重表征作为最能展现化学学科特征的表征思维,基于此,本文着眼于将三重表征同电化学的内容相联系,以将知识高度概括化、模型化,便于学生掌
"我在这十几年时间里,时刻不忘为自己、为亲友谋取私利,没有条件时等机会创造条件,有条件时我绝不放过,就是老母鸡从家门前经过,我也要捉回家下个蛋后再放走。"说这话的,是江
"当堂检测",就是在课堂上对学生所学的知识进行的及时检测。在教学中,当堂检测是保障课堂有效性的关键。本文阐述了英语课堂中"当堂检测"的重要意义,在课堂教学改革的新形势
近年来,随着互联网的发展,移动终端市场不断扩大,人们的审美观念越来越进步,对移动终端界面的要求也趋于多样化,国内大量高等院校都设置了相关专业,2018年12月教育部发布的最新《中等职业学校专业目录》,已经将移动终端应用界面设计列入到了中等职业学校专业目录中,标志着中职计算机专业研究领域进一步扩大,对中职课程开发的教研人员来说也面临了新的任务,目前已经有不少中职学校开设了《UI设计》课程,经过调研发
炼焦作为高能耗、环保问题突出的产业,具有巨大的节能减排潜力。结合宝钢炼焦现状,介绍了宝钢焦炉在提高传热效率、余热回收以及减少焦炉炉体散热等方面的节能技术。
一代人有一代人的使命。革命战争年代,青年是反帝反封建的先锋队和后备力量。和平建设时期,广大青年团员应不忘初心使命,练就过硬本领,永远做到奋发有为献青春、不负韶华堪重
  作为一种发明问题解决理论,TRIZ创新方法可以协助技术人员发明创新。该方法在国内外机械制造等行业已经得到应用,并取得了很好的成效,其中技术矛盾和40个发明原理是经常