跨特征层信息融合的目标语义分割方法研究

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:qin6668
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
语义分割任务要求根据图像中每个像素所属的感兴趣目标给像素赋予标签,使得不同语义种类的目标能够在图像上区分开来。语义分割可以看成是一个像素级分类问题,其基本思想是对输入图像产生高语义特征,同时保持高空间分辨率,以获得稠密分割结果。该任务面临的主要挑战如下:(1)上下文聚合问题。图像中的像素点并不孤立,像素与像素之间存在语义关联性。位于同一个目标类区域的像素应该具有相似的语义表征,而位于不同目标类区域的像素则应当不具备语义相似性,有效建模像素特征间的上下文关系是极具挑战性的。(2)计算资源问题。语义分割网络为了提升分割精度,通常使得高语义特征保持较高的通道维数和空间分辨率,这显著增加了计算资源开销。本文重点研究跨特征层信息融合的方法以聚合多层特征上下文信息,以及语义分割头的轻量化以降低模型的计算复杂度。本文的主要工作总结如下:1.OCRNet(Object-Contextual Representation Network)通过目标类特征来描述像素特征,在语义分割任务上表现优异。然而OCRNet忽略了输入图像中存在的类别和不存在的类别,其对应的目标区域特征所捕获的信息是有区别的。本文分析了两者之间的差异性,认为存在的类别所对应的区域特征具备类别语义性,而不存在的类别所对应的区域特征捕获的是像素特征的上下文依赖。本文提出区域特征分类策略,将目标区域特征划分成语义类别向量和全局上下文向量,并融合跨特征层信息丰富全局上下文向量建模的像素相关性。2.语义分割网络通常将主干网络输出特征的维度设置为512维,为了实现语义分割头的轻量化,本文将其修改成256维,这导致了模型分割精度的下降。本文提出用非对称类别注意力机制代替原始的类别注意力机制,前者有着更少的参数量,而且缓解了特征维度降低带来的性能衰减。另外,本文引入了语义类别权重,用于增强语义类别向量的语义表达能力。3.本文从上下文聚合和模型轻量化两个角度出发,搭建了一种新颖的语义分割网络结构。与MMSegmentation复现的OCRNet相比,本文提出模型的分割头在参数量、内存占用、浮点计算量上都仅为OCRNet分割头的1/2,而且本文方法的mIoU指标在Cityscapes验证集上比OCRNet高了0.24%,实验结果表明本文算法实现了分割效率和分割性能的良好平衡。
其他文献
报纸
近年来,垃圾回收行业发展得如火如荼,但对空调等制冷类家电的回收处理能力尚显不足。目前,压缩机作为空调制冷类设备的核心,其回收切割方式仍依赖于传统的手工切割,效率较低,难以满足正常的工业生产需求。因此,业内亟需完整、高效、自动化程度较高的空调压缩机自动化切割方案。压缩机边缘关键点检测和焊点检测是切割方案中的两项重点检测技术。因此,本文首先对压缩机边缘关键点检测技术进行研究。尝试使用霍夫直线检测获得罐
学位
点焊工艺是汽车焊接工艺中的重要环节,在汽车生产中发挥着举足轻重的作用。由于生产环境复杂,车辆点焊焊点常出现质量问题。传统检测方法采用人工凿检抽检的方式,效率差、覆盖率低,不仅为生产企业带来成本增加的问题,而且也为车身强度埋下安全隐患。同时随着信号监测手段的进步,点焊过程的数据获取变得简单,因此,利用数据驱动的无损检测法取代传统破坏检测方法,成为行业追逐的热点问题。然而,由于点焊数据具有耦合性高、非
学位
国内每年产生的废弃家用电器数量十分庞大,其中废弃冰箱和空调排在第二、三位,而这两种电器内部的压缩机具有很高的经济回收价值,回收处理中一道关键工序是将压缩机切开。由于压缩机本身是十分不规则的黑色罐体,目前的处理方法主要是靠人工用乙炔气将罐体切割开,费时费力,效率低下,而且工作环境十分恶劣。为了提高生产效率,改善工作环境,采用自动化切割技术很有必要。回收压缩机的三维重建研究对实现自动化切割具有重要的意
学位
非洲是中国的重要合作伙伴,非洲学生是中国国际教育的重要组成部分,因此研究中国对非洲学生的本土接纳,既有利于促进中非合作,特别是"一带一路"倡议的发展,也有利于提升中国国际教育。本研究采用定性方法,主要通过与十三位中国学生的半结构式访谈和文献资料分析,描述了中国对非洲学生的官方接纳和以本土学生代表的民间看法,并借助社会分类理论和群际威胁理论对这两者之间的联系进行了解释。中国的官方接纳建立在中非友好关
学位
构建单元整体教学视域下的图形与几何课堂,需要教师厘清学生已有的认知经验,唤醒学生思维;需要教师引导学生通过操作探究和理性思辨,深化对新知的理解和掌握;需要教师示范引领,解决问题,深度归纳,使学生逐渐在头脑中架构起完整的知识结构体系。
期刊
伴随着改革开放进程的深入和“一带一路”建设的逐步推进,跨国并购在中国企业“走出去”中的作用越来越重要,是中国企业提升自身实力的有效途径。跨国并购的过程涉及众多利益相关者,同时中国企业也会遇到东道国给予的外来者劣势挑战,这些都对实施跨国并购的中国企业履行社会责任的能力提出了新的要求。中国企业的跨国并购行为是否会提升自身社会责任履行能力是一个值得探究的问题。依据高阶梯队理论,管理者特征会对包括企业社会
学位
随着智慧城市建设的发展,智能视频监控在人们的生活中越来越常见,而行人属性识别在其中发挥着重要作用。行人属性识别广泛应用于计算机视觉的其他任务中,包括行人重识别、自动驾驶技术、智能视频监控等,具有很大的研究价值。行人属性识别任务的目标是从预定义的属性列表中预测一组属性来描述行人。行人属性识别通过特征提取器获取行人特征,然后根据该特征对每个属性的预测概率来判断行人的该属性是否出现。随着深度学习方法在计
学位
煤焦油的获取是通过氨水洗涤煤气而来,煤气中夹带的灰分、焦粒、热解碳也给氨水洗焦油后的分离提高了难度。杂环化合物及一些小粒子热解碳的存在使水分和油形成稳定的乳液体系,使焦油在氨水中的沉降时间延长。即焦化厂循环氨水长时间运行后氨水中油含量升高,造成焦油流失、引起焦炉集气管喷淋堵塞、形成循环系统污堵,也会给后续剩余氨水系统及焦化废水处理系统的稳定运行带来不利影响。向循环氨水中分别添加五种市面上比较成熟的
期刊
采用聚醚类破乳剂分离焦油氨水,考察了破乳剂种类、破乳剂投加量、破乳时间对破乳后上清液的含油量、COD值以及悬浮物含量的影响,并揭示破乳机理。结果表明:当破乳剂PFA8311的投加量为500 mg/L、破乳时间为24 h时,焦油氨水分层明显,上层澄清透明,下层为黑色焦油。与未处理焦油氨水相比,焦油去除率为93.72%;COD去除率为56.71%;悬浮物去除率为98.39%。PFA8311分子吸附到油
期刊