基于生成对抗网络的像素级图像分割研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:itliutao123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像分割是数字图像处理领域的一个主要研究方向,也是许多计算机视觉任务的研究基础,其目标是对图像中的像素进行分类,提取有价值的信息。随着时代发展,许多领域对细节分割提出了更高的精度要求,如现代医学领域中的微小肿瘤分割。基于深度学习的图像分割算法可以自动提取图片的低级与高级语义信息,使得图像分割算法的精度有了质的提升,但仍存在复杂背景下的边缘细节丢失、边界分割精度不高等问题。针对这些缺陷,本文调研了多种深度学习的图像分割方法,以生成对抗网络为基础,进行了图像分割算法的研究工作。本文以人像分割为例,利用生成对抗网络,并引入软分割技术,使图像分割精度达到更准确的像素级别。首先,本文学习和对比了近期较为优秀的图像语义分割算法,如PSP-Net、BiseNet、GCN、U-Net,这些算法虽然能完成人像分割的任务,但仍存在人像边缘分割细节丢失的问题。为了进一步提高像素级人像分割的精度,本文引入生成对抗网络的思想,设计并实现了基于生成对抗网络的人像分割网络。搭建U-Net结构的生成网络用于人像分割,通过跳跃连接来融合高级与低级的语义信息;判别网络用于判别是生成的人像分割图还是真实的人像分割图,同时设置对抗损失函数,检测并纠正了真实分割图与生成分割图的不一致性,提升了在复杂背景下的边缘分割精度。其次,本文为了解决分割发丝等更微小边缘细节丢失的问题,在上述基于生成对抗网络的人像分割算法的基础上引入了图像软分割技术,设计并实现了基于边缘敏感的肖像分割算法,来进一步优化提高微小边缘的分割精度。算法的主要过程分为四个阶段:第一阶段先通过GAN分割算法得到人像前景和背景;第二阶段通过边缘注意力模块得到发丝等微小边缘最可能存在的区域;第三阶段单独将三分图和原图送入一个编码解码结构的卷积神经网络进行优化学习,得到边缘细节信息;第四阶段将前景与边缘细节融合得到最终精细的分割结果。最后,本文分别在Supervise.ly人像数据集、百度人像数据集上进行了实验,验证了基于生成对抗网络的人像分割算法的有效性。相比于普通分割网络U-Net,加入对抗模式训练后,mIOU精度提升了4.56个百分点。再用从互联网上随机下载的人像图像进行实验,得到较好的分割结果,证明了算法的泛化能力和应用价值。将基于边缘敏感的肖像分割算法在Shen等人公开的肖像分割数据集上进行测试,实验结果表明,通过四个阶段的优化,能获得更精确的细节分割结果。
其他文献
近年来,阜阳市把推进城镇化作为富民强市的重要抓手和推动经济快速发展的重要引擎,全力实施工业化、城镇化“双轮驱动”战略。“十一五”期间,阜阳城镇化建设成就突出,但在城镇化
<正> 传统财务分析是以企业会计报表等财务资料为依据,采用一定的方法和标准,对企业财务状况和经营成果的分析和评价。事实上,财务资料以外的很多业务资料也与企业财务状况和
目的对制备的水降解材料聚乙烯醇包装薄膜进行溶解度测试,并用薄膜降解溶液对小鼠进行急性毒性实验以评价其生物安全性。方法将水降解材料聚乙烯醇包装薄膜和水按照一定比例
为了解决某大型钢结构厂生产加工的焊件通过人工推车输送到达工位的问题,设计了运输车呼叫系统,通过该系统能有效地将焊件自动输送到达所呼叫的工位。基于PLC核心控制技术,对
解决城市住房问题是现代化的重要挑战。对城市化背景下日本住房问题和政策干预的演进的考察表明,在城市化的早期阶段,日本住房问题发轫,卫生问题尤其严重,政策干预以住房卫生政策
随着我国高等教育事业的迅速发展,高职院校的学生数量不断扩大,受经济社会转型期的影响,学生管理工作正面临诸多新的挑战.本文根据中央16号文件和教育部<普通高等学校学生管
指出了地方性知识由于其独特的作用在民族地区生态的可持续发展方面扮演着重要角色,是解决民族地区生态与发展问题的手段之一。通过对民族地区地方性知识在生态保护上的独特优
茎瘤固氮根瘤菌(Azorhizobium caulinodans ORS571)属于α变形菌纲,作为根瘤菌,A.caulinodans不仅可以在宿主植物毛萼田菁的根部和茎部结瘤,而且在自生状态下也具有固氮能力
目的比较替格瑞洛替换疗法和大剂量氯吡格雷治疗氯吡格雷抵抗(CPGR)急性冠脉综合征(ACS)的疗效和安全性。方法选择我院2016年3月~2018年3月收治的ACS合并氯吡格雷抵抗患者62
目的对茄科植物马尿泡全草体积分数70%乙醇提取物的氯仿和乙酸乙酯萃取物的化学成分进行研究。方法采用反复硅胶柱色谱、Sephadex LH-20柱色谱和半制备高效液相色谱分离纯化,