弱监督语义分割方法研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:THE_BOSS
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
语义分割旨在对图片所有像素点进行类别标记,随着深度学习与高精标记数据集的快速发展,该视觉任务取得了重大进展。然而,繁琐耗时的人工标记成本极大限制了样本数量与识别类别种类,阻碍了语义分割的实际应用。因此,近几年基于弱监督的语义分割得到了广泛关注。给定图片级别的类别标签(即只标明图片含有的类别),CAM(类别响应图,ClassActivationMaps)常用于初始图片分割(也称初始种子),其分割区域通常集中于小且稀疏的显著判别域,而非完整的物体对象。为了提升分割性能,本文着眼于初始种子的区域扩张。
  首先,为了扩张初始种子区域,本文利用空洞卷积(Dilated Convolution)改进弱监督语义分割中的分类模型,增大特征提取组的卷积感受野以扩充CAM响应。同时,本文改进池化等结构参数,并采取更有效的测试策略优化初始种子。进一步,结合辅助显著图生成人造的分割图监督信号,以分析辅助数据对弱监督语义分割性能的影响。通过详细的对比实验,本文首先实现了较高的Baseline弱监督语义分割基准性能,在PASCALVOC2012验证集与测试集上分别为60.12%与61.09%mIoU(平均交并比,meanIntersectionoverUnion)。通过实验确定弱监督语义分割性能的关键影响因素,即初始种子的性能。
  接下来,由于初始种子通常只关注显著判别性的区域,需要对其进行更全面地扩张。本文提出级联的语义擦除结构以提高分类模型的种子扩张效率。依次连接多个分类子网络,阶段式地衔接语义擦除模块以抑制高响应的显著判别域。相比已有的中间高维特征图擦除方法,本算法选择抑制类别响应特征图CAM。在CAM中语义信息的指导下,将初始种子区域扩充到正确的潜在物体部位,同时纠正部分类间标签错误。实验表明语义擦除算法极大提高了空间擦除后的扩张效率,证明了该算法有效性,在VOC验证集与测试集上的性能分别为62.31%与63.37%mIoU。
  最后,由于空间擦除视空间单元的所有通道响应为一个整体,擦除区域的所有通道信息丢失,带来了两类典型的语义混淆问题:类内识别缺乏通道模式的多样性,同时在扩张中易放大原始错误特征。通过研究卷积通道编码模式,本文提出对抗式的通道擦除算法,从通道而非空间层面进行区域扩张。通过将不同的通道响应分开,抑制高响应的主导通道以促使模型激活其他的相关通道,以丰富物体特征多样性的方式实现初始种子的扩张。同时,这种对抗式的抑制策略激活了不同通道间的相互竞争,使得部分初始的错误特征得以纠正。实验证明了通道擦除相比空间擦除的有效性,在VOC验证集与测试集上的分割性能分别为62.76%与63.54%mIoU。
  本文主要针对弱监督语义分割的分类模型进行研究。通过扩张初始种子分割图以优化得到的人造监督信号,从而实现与大部分已有弱监督方法匹敌的分割性能。本文提出的改进算法及其核心思想为弱监督语义分割提供了新颖的视角与思路,对该领域的学术研究具有重要意义。
其他文献
【摘 要】要学好英语,有许多好的方法,但我们认为背诵是学好英语的有效途径。要学好英语,有许多好的方法,但我们认为背诵是学好英语的有效途径。在多年的英语教学中,我也经历过费了很大力气给学生讲,但成绩仍不理想的遭遇。让学生背诵学习英语,还是从一句不经意的气话开始的。记得当时任教的班级英语成绩很不好,当时心情也不好,就让几个英语成绩垫底的学生每天背单词和句子,没想到过不了一学期,这几个成绩最差的学生英语
期刊
【中图分类号】R151.3 【文献标识码】A 【文章编号】2095-3089(2016)34-0037-02  食品防腐剂是食品加工中使用的一类具有抑制微生物增殖或杀死微生物的化合物,它具有抗菌剂和抗氧化剂的双重作用,既可以抑制霉菌、酵母、细菌的生长而起到防腐作用,还可以使食物不产生腐臭、抑制褐变和黑斑的形成。正是因为防腐剂的这些神奇功效,它在现代食品中得以广泛应用,食品的保质期得以延长,食品工业
期刊
【摘 要】在2016年9月20日,召集我校全体数学教师进行教研活动,讨论集体备课,大家献计献策,各抒己见,我对“三定位六环节”的教学模式,还存在如下的困惑。最基本的,教师要转变观念,大胆放手让学生自主学习,学生能想的让他自己去想,能说的让他自己去说,能做的让他自己去做。以充分地满足不同学生的不同需求,最大限度地促进他们的发展。  【关键词】课程改革 观念转变 教法转變 关注加强  【中图分类号】G
期刊
【摘 要】经历了十几年的课改,教学一直在彷徨中来回打转,过程就是传统教学法与课改新理念的碰撞,从最初的盲目跟从新课改,完全否定传统教学法,结果失败后再回归到传统,但同样不能适应不断发展的学生需求,最后再到二者的互相间融,但总是找不到一种有效的,能有说服力的教学方法,通过学习现感觉新课改与传统教学之间的矛盾其实就是陶行之“行是知之始,知是行之成”对王阳明“知是行之始,行是知之成”的反驳。根据市教研室
期刊
多智能体系统的编队控制广泛应用于多个领域,如无人机编队,无人车编队,多机器人编队等,其有关问题得到了诸多研究者的关注。然而,在很多工程应用中,由于外部环境的干扰,信道传输带宽受限,通信设备以及控制器设备受限等因素的影响,智能体之间很难保持连续的信息交流,控制器也很难保持连续的更新,而且输入时间延迟也很难避免。另外,一些复杂的任务是仅具有单个领导者的多智能体系统无法完成的,但可以由具有多个领导者的多智能体系统来完成。因此,本文从采样策略的角度出发,研究了多智能体系统的编队控制问题,智能体被划分为跟随者组和领
多智能体系统协同控制是网络科学中的一个重要研究方向,在社会网络、交通网络、无人系统集群等领域有着广泛的应用,其理论价值巨大,应用前景广阔。作为多智能体协同控制理论的最基本形式,一致性研究受到了众多领域的专家学者的关注。本论文基于矩阵耦合的网络拓扑出发,对多智能体系统的一致性问题进行了研究,与标量权重网络不同,矩阵权重具体的描述了个体状态之间的内部耦合关系,但也使得许多标量权重下的一致性结论不适用于矩阵权重的情形,这为矩阵权重一致性问题的研究带来了难点。本论文主要研究了多智能体系统的矩阵权重一致性问题,分别
随着无人驾驶技术的发展,无人船舶成为未来海上航行的研究热点。水面无人艇作为一种小型化无人驾驶船,在军事和民用领域得到了广泛的应用。发展无人艇不仅能扩展海军装备的多样性,而且能提高我国海洋利益保障能力,对国防建设和经济发展具有重要的意义。避碰决策是无人艇的关键技术之一,在提高航行安全性方面起着重要的作用。目前提出了许多无人艇的避碰方法,全局路径规划法具有路径短和时间最优等特点,在无人艇避碰中有着良好的表现。由于该方法未考虑无人艇运动特性和环境等约束,直接应用到无人艇存在实际航迹差异较大的问题。局部避碰方法具
随着人工智能技术的发展,尤其是通信、传感、定位和图像识别等技术的广泛应用,无人自主机器人越来越多的出现在我们的视线中。在实际运用中,经常需要使用多个机器人来协同执行任务。因此,一般将每个自主机器人看作一个智能体,将多自主机器人系统简化为多智能体系统。
  传统的多智能体系统编队控制一般是基于智能体的精确信息设计渐近稳定的控制器。而在实际应用中,获取精确信息较为困难。因此,本文第三章研究基于粗糙距离信息的有限时间编队控制问题,使智能体在只能感知粗糙信息的情况下依然可以完成编队任务。相比于传统的渐近稳定
现实网络之间存在相互作用,单层网络的研究已经不能满足实际需要。最近几年,国际上提出了多层网络的概念。多层网络能更好地描述实际网络之间的相互作用。同步是现实网络中普遍存在的现象。多层网络的同步研究具有十分重要的意义,正吸引着不同领域研究者的关注。由于实际网络往往包含大量节点,且拓扑结构复杂,牵制控制实现多层网络的同步更加实际和经济。
  以往的牵制控制研究大多都是基于单层复杂网络,本论文基于无向连接的两层网络,研究了牵制控制下的多层网络的层内同步问题,其中第一层的节点和第二层的节点一一对应无向连接,每
突发灾难发生后,受灾区域的一些基础服务设施,例如道路、医院等,可能会遭受严重破坏。由于突发灾难下伤员数量激增,远远超出现存医疗设施的承受能力,大量伤员无法入院治疗,可能导致伤员死亡率增加甚至造成现有医疗服务系统瘫痪。因此,突发灾难下迅速的应急医疗响应决策对提高伤员存活率具有重要的意义。
  针对突发灾难下应急救援工作,以灾后应急医疗设施选址与分配问题作为研究主体,在现存医院的基础上选择要新建的临时应急医疗设施的位置、将有限数量的救护车分配至应急医疗设施以及将受灾点伤员分配至应急医疗设施进行统一决策,