基于目标分解的自然图像抠图算法研究

来源 :重庆理工大学 | 被引量 : 0次 | 上传用户:cannyjie
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像抠图(Image Matting)是一种精确提取目标的技术,是加深图像理解的重要方式,也是图像合成技术的重要组成。目前抠图技术已广泛应用于计算机视觉的各个领域,并且有较多的现实应用场景,如影视制作、云会议更换背景、弹幕人像屏蔽等。但是由于图像组成的复杂性和人们提取前景时的主观性,导致在提取前景目标时难度较高,因此在抠图技术中引入辅助图来提供先验信息。常用的辅助图有粗略分割图、背景图和三分图等,其中三分图是最常用的辅助图。通过使用提供先验信息来降低抠图任务难度的方式已经被业界广泛使用,但是制作辅助图的过程极为繁琐,这违背了人们希望使用机器学习的方法来提高抠图效率的初衷。为了提高抠图的效率并且完成端到端的抠图,本文提出了两种无需辅助图的端化抠图算法,分别是基于交互式分割的抠图算法和基于位置注意力的抠图网络。在基于交互式分割的抠图算法中,将抠图任务分解为两个串联的子任务,分别为针对于前景目标的分割任务和针对于边缘的抠图任务。为了进一步提高效率,首先,将图像预分割为具有局部相似性的超像素区域,使用区域内部的像素颜色均值来该超像素区域;其次,根据人工标记的先验信息,建立F-B图结构,扩展随机游走的范围,并使用随机游走的方法求解,获得分割结果;最后,针对分割结果的边界进行抠图,提出改进的抠图算法,对其进行二次处理,得到抠图结果。在BSD500和MSRC数据集上的实验证实,所提出的分割方法与其他算法在时间和平均交并比等指标上对比有较大优势;在Alpha Matting数据集上的实验充分证实所提出的算法在提高效率的同时精度也有一定提升。此外,在生活照更换背景的实验上也展现了所提出算法的应用价值。在基于位置注意力的抠图网络中,使用Mobile Net V2作为骨干网提取特征。使用底层的高分辨率特征代表图像中前景目标的细节特征,使用高层的低分辨率特征学习图像中前景目标的主体。为了更好的融合骨干网不同层级之间的特征,引入多尺度模块(Mutilscale Module,MSM)学习不同感受野下的特征。引入全局解码器模块(Gobal Decoder,GD)生成全局图,使用Ground Truth的下采样图对全局图进行监督训练,并且作为位置注意力消除低级特征中冗余的背景信息。在融合模块中将两个子任务进行融合,输出最终结果。另外,由于抠图任务的公开数据量较少,本文搭建了一个含有19964张高分辨率图片的人像抠图数据集。本文算法在测试集上的结果表明,在绝对值误差、均方差误差、连接性损失以及梯度损失的指标上都优于其他方法。另外,通过消融实验的结果可以验证本文所使用模块的有效性。综上所述,本文基于目标分解的思想将抠图任务进行分解,以此来避免使用辅助图,可以提高抠图效率。分别提出了基于交互式分割的抠图算法和基于目标分解的抠图网络,通过大量的实验表明,本文所提出的算法无论在效率还是在指标上都优于现有广泛使用的抠图算法。
其他文献
目的:探讨人参皂苷Rd对结肠癌SW480细胞增殖和凋亡的影响及分子机制。方法:实时荧光定量PCR(RT-qPCR)检测结肠癌组织及细胞中lncRNA MAGI1-IT1表达水平;结肠癌细胞SW480分为对照组、低、中、高剂量人参皂苷Rd组、si-MAGI1-IT1组、si-NC组、高剂量人参皂苷Rd+pcDNA-MAGI1-IT1组、高剂量人参皂苷Rd+pcDNA组。四甲基偶氮唑盐比色法(MTT)
期刊
根据习进平总书记对广东重要讲话和重要指示批示精神,广东省委省政府对广东省的营商环境优化有了重要工作部署,其中“获得电力”成为评价营商环境的一项重要指标,而企业用电报装的用时又是“获得电力”的重要衡量指标。广东电网公司自从推行用户用电报装业扩工程投资界面延伸至客户红线政策后,G供电局区域内新增10k V用户的业扩投资界面延伸率仅为75%,而0.4k V用户业扩投资界面延伸率达99%。深究其具体原因,
学位
本文综述了近几年来水环境中硼的化学行为研究情况,对其迁移转化行为进行一个多元化、定量化的研究。在水环境中,硼的迁移转化以共沉淀为主,其次是吸附解吸。本文研究不同影响因素下,硼在水环境中的迁移转化机理及其在植物中的重大作用,对硼的生物有效性进行探讨,讨论硼的生物有效性与pH、温度、土壤水分等的作用关系。研究结果表明:(1)在水环境中,硼吸附量随着水溶液中总硼浓度的升高而增大;pH由强酸性至强碱性变化
期刊
近年来在互联网的催生下社交媒体快速发展,数据呈指数增长,面对如此众多的数据,如何挖掘其背后的价值是我们一直关注的焦点。数据挖掘是一个通过算法从大量数据中发现隐藏信息的过程。数据挖掘常用技术包括关联规则、分类、聚类、预测等技术。由于传统的关联规则挖掘算法存在数据价值密度低和频繁项集新颖度低的问题,导致挖掘效果不好。近年来研究者发现通过自然语言处理技术能高效识别文本数据中的实体,在解决文本数据价值密度
学位
考虑区域创新中政府、企业及市场间的作用,理论分析中国政府科技支出对区域创新能力的影响及作用机理,采用30个省区(因数据缺失,未包含西藏地区及港澳台地区)2008—2020年面板数据以系统GMM模型和门槛效应模型检验其影响效应及非线性关系。研究表明:政府科技支出对区域创新能力有显著的激励作用和正向滞后效应;政府科技支出对区域创新能力的作用效力受到企业创新绩效、市场化程度的单门槛效应影响,存在效力发挥
期刊
为促进中小科技企业创新,我国于2011年和2016年开展了两批“促进科技和金融结合试点”。本文从市场和政府“双轮驱动”的视角,深入微观层面解析该试点政策影响中小科技企业创新的内在机制,并基于新三板挂牌中小科技企业数据,采用DID方法评估该试点政策的实施效果。研究发现,试点政策通过政府和市场的结合提升了金融资金和政府资金对中小科技企业创新的促进作用:相比于非试点城市中小科技企业,试点城市中小科技企业
期刊
互联网时代每个人都能接触并传播大量的信息,每天都会产生海量的数据与内容,大量信息的传播借助于各种各样的载体如文字、声音、图像、视频等。在诸多信息的传播方式中,图像凭借其直观、易生产、传播成本低的特点成为了互联网信息传播的首选方式。图像可见水印作为图像版权保护的重要方式得到了极为广泛的应用。图像水印存在有效性检验以及对过期版权处理的需求,因此不断有人投入到对可见水印的监测与去除的研究中。近年来深度学
学位
期刊
随着社交网络种类的日益丰富,人们对于社交网络的需求也逐渐增多。影响力最大化节点作为网络焦点和传播扩散源节点,对人们日常中社交信息的决策起到关键作用。本文致力于分析社交网络中影响力最大化问题,主要针对局部节点传播和影响力范围值,分别考虑局部节点优化和全局扩散,以及当社交网络基于目标感知时来解决影响力最大化问题。具体研究内容如下:(1)对局部节点的影响力及整体扩散问题进行了研究。针对社交网络影响力最大
学位
随着计算机图像处理技术的发展及现代社会对智能化设备需求的日益增长,多目标跟踪技术应运而生。多目标跟踪是自动驾驶,医学检测等领域的基础,它基于目标检测任务,通过关联不同帧之间的感兴趣目标来获取视频目标在时序上的连续信息,进而分析目标的速度,运动方向,行为轨迹等。多目标跟踪早已进入学术界研究人员的研究进程中,也已经得到工业界的成功应用。这项技术在现在,在未来都能为企业,为社会各界带来巨大的经济价值,具
学位