基于注意力机制的图像语义分割方法研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:y2228158
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像语义分割是计算机视觉领域一个非常活跃的研究方向,它在视频监控、场景分析、人机交互以及行为分析等方面有着巨大的应用潜力。由于卷积神经网络在计算机视觉领域的优异表现,基于卷积神经网络的语义分割方法已经成为完成图像语义分割任务的主流方法。对于这种像素级别的分类任务而言,卷积神经网络捕获像素上下文信息的能力直接影响分割结果的准确性。与此同时,作为深度学习领域的研究热点,注意力机制能够使深度神经网络模型有选择性地关注较重要的输入特征。因此,本文对基于注意力机制的语义分割方法展开研究,将注意力机制引入至现有的语义分割模型之中以提升模型捕获上下文信息的能力。本文研究工作主要包括以下两个方面:第一,针对现有的语义分割方法中的特征融合方法的不足,本文提出一种基于注意力机制的跨层空间特征融合模块,简称CSFF模块。该模块基于注意力机制,根据特征图之间的语义相似性对特征进行自适应融合。这种自适应融合过程将关联性较强的语义特征聚合在一起,使融合特征图上的特征能够有选择性地获取与自身关联性较强的上下文信息。CSFF模块相关实验结果表明该模块能够有效提升语义分割网络的分割准确度,进而验证了CSFF模块的有效性。第二,为了捕获高分辨率特征图中的上下文信息,本文提出一种自注意力解码器,并在此基础上进一步提出一种基于自注意力解码器的双路语义分割网络。该网络包含了两种空间自注意力模块,用于捕获两种不同分辨率的特征图中的上下文信息。同时,为了保证两种空间自注意力模块捕捉到的上下文信息不会因为互相覆盖而丢失,该网络使用一种双路并行的结构将两种空间自注意力模块提取的上下文信息分离。使该网络能够获取比一般的单路网络更为丰富的上下文信息。该网络在公开数据集Cityscapes和Pascal-Context均取得了较好的语义分割结果,进而验证了这种网络结构的有效性。总体上看,本文提出的两种基于注意力机制的图像语义分割方法能够显著地增强语义分割网络捕获上下文信息的能力,提升模型的语义分割表现。
其他文献
水分和养分是限制半干旱区玉米产量的主要因素,半干旱区玉米生长季蒸发量大,降雨量小,土壤贫瘠,导致农作物产量不高以及水肥利用效率低等问题。水肥一体化具有提高水分利用效率,提高肥料利用率,改善土壤微环境的作用。本研究在吉林省半干旱区,通过两年大田试验,在自然降水的条件下,研究了不同滴灌方式、不同灌水量、不同施肥量及其相互作用对玉米产量和干物质、氮磷钾吸收积累和利用效率的影响,玉米需水特性及水分利用效率
引子:"积极应对人口老龄化是国家的一项长期战略任务。习近平总书记在党的十九大报告中提出:"积极应对人口老龄化,构建养老、孝老、敬老政策体系和社会环境",这是党中央针对
会议
树立正确党史观,是党史学习教育正本清源、固本培元的关键所在。党史观是在党史学习研究、党史宣传教育、党史资料收集、党史经验总结等一切党史活动中所持的基本立场观点方
目的:分析胃功能三项检验诊断慢性胃病变的临床价值。方法:选取罗山县人民医院在2018年1月至2020年3月期间收治的240例疑似慢性胃病变患者,分别进行胃功能三项检验诊断,包括
《儒林外史》是我国长篇古典小说史上独具特色的一部作品,从小说题材的选取到写作技法的展现都让人耳目一新。它脱离开古典小说经常选取的帝王将相、才子佳人的题材范围,以文人的视角与价值取向充满喜剧性地来直接反映与批判现实生活,揭露社会的畸形与腐朽。基于此,本文从以下三个方面进行展开:《儒林外史》人物形象的悲剧意蕴、《儒林外史》人物形象的悲剧根源、《儒林外史》的喜剧表现艺术。从人物形象的悲剧意蕴看,作者笔下
军事工程施工环境危险恶劣,需要使用高机动地面作业机械,实现工程施工自动化和远程操控。无人自动控制技术在军事领域快速发展,给合国外军用土方机械,以挖掘机、装载机、推土
基于深度学习的方法,运用单次多框检测器(SSD)目标检测框架和自注意力机制,针对施工人员佩戴安全帽数据集进行神经网络训练.通过调整原始SSD目标检测框架中的参数,并向SSD目
图像语义分割算法是计算机视觉领域的关键技术之一,是指对图像上每一个像素点进行预测,推断其所属标签,从而对图像中不同类别的像素加以标记并分割。得益于深度学习和全卷积
专业学位研究生教育是我国高等教育的重要组成部分,是培养高层次应用型专门人才的主要渠道,发展专业位教育是服务国家建设的重要路径,是经济社会进入高质量发展的必然选择。
猪细小病毒(porcine parvovirus,PPV)是引起母猪繁殖障碍的主要病原之一,其广泛分布于世界各地,给我国乃至全世界的养猪业造成了巨大的经济损失。随着对猪细小病毒研究的不断